mirror of
https://github.com/shadow1ng/fscan.git
synced 2026-09-24 04:01:52 +08:00
* feat: v2.1.0 核心重构与功能增强
## 架构重构
- 全局变量消除,迁移至 Config/State 对象
- SMB 插件融合(smb/smb2/smbghost/smbinfo)
- 服务探测重构,实现 Nmap 风格 fallback 机制
- 输出系统重构,TXT 实时刷盘 + 双写机制
- i18n 框架升级至 go-i18n
## 性能优化
- 正则表达式预编译
- 内存优化 map[string]struct{}
- 并发指纹匹配
- SOCKS5 连接复用
- 滑动窗口调度 + 自适应线程池
## 新功能
- Web 管理界面
- 多格式 POC 适配(xray/afrog)
- 增强指纹库(3139条)
- Favicon hash 指纹识别
- 插件选择性编译(Build Tags)
- fscan-lab 靶场环境
- 默认端口扩展(62→133)
## 构建系统
- 添加 no_local tag 支持排除本地插件
- 多版本构建:fscan/fscan-nolocal/fscan-web
- CI 添加 snapshot 模式支持仅测试构建
## Bug 修复
- 修复 120+ 个问题,包括 RDP panic、批量扫描漏报、
JSON 输出格式、Redis 检测、Context 超时等
## 测试增强
- 单元测试覆盖率 74-100%
- 并发安全测试
- 集成测试(Web/端口/服务/SSH/ICMP)
* fix(ci): 移除 PR 对 Project 自动化的触发
* fix: Elasticsearch未授权检测优先于爆破 (#554)
* fix: 修复RDP爆破高误报率问题 (#555)
- 移除 screen.go 中错误的认证结果覆盖逻辑
- 启用 NLA 协议的 ErrorCode 字段检测
- 添加 PubKeyAuth 验证确保认证真正成功
- 修复 io.go 中错误被静默忽略的问题
- 修复 socket.go/io.go 中可能导致 panic 的代码
- 修复 screen.go 中文件句柄泄漏和 log.Panic
* fix: 修复-user/-pwd凭据参数不生效的问题
问题原因:
- Parse()解析凭据后更新globalConfig
- 但BuildConfigFromFlags()创建新Config时使用默认字典
- 导致解析的UserPassPairs等凭据信息被丢弃
修复内容:
1. initialize.go: 将Parse解析的凭据结果应用到新Config
2. credential.go: 单用户密码对时创建UserPassPairs
3. rdp.go: 单凭据测试时跳过指纹识别,减少连接次数
* feat: RDP使用NLA仅验证模式,避免挤掉已登录用户
- 添加ErrNLAAuthSuccess标志用于NLA验证成功信号
- tpkt层支持nlaAuthOnly模式,验证成功后不建立完整会话
- x224层正确传播NLA验证结果
- rdpCrack改用NlaAuth进行凭据验证
* fix: 修复进度条在Windows终端满屏重复输出的问题
- 添加终端宽度检测,动态调整进度条长度
- 使用空格覆盖清除旧内容,避免残留
- 简化进度条格式,确保不超过终端宽度
* feat: 优化日志颜色方案,区分漏洞和普通信息
- 新增 LogVuln 级别(红色),用于漏洞和重要发现
- 密码爆破成功、未授权访问、POC漏洞等改用红色显示
- 普通信息(扫描统计等)改为白色
- Web指纹保持绿色
* refactor: 精简化输出,移除冗余启动信息
- 移除showParseSummary开局配置输出
- 移除LogPluginInfo/LogPluginInfoWithPort插件信息输出
- 移除alive_scanner冗余统计输出
- 移除port_scan_start扫描开始提示
- 移除handleUDPPorts SNMP死代码
- 移除相关i18n条目
* chore: 版本号更新为2.1.1
* fix: 降级依赖版本以保持Go 1.20兼容性
* feat(ldap): 添加NTLM Hash认证支持 (#433)
* chore: 清理无用的 replace 指令
* fix(ping): 修复 TTL expired 导致主机误判为存活的问题
在 ExecCommandPing 中增加错误关键词检测,当 ping 输出包含
TTL expired、Destination unreachable 等错误信息时,不再将
目标主机标记为存活。
Fixes #454
* fix(proxy): 修复透明代理导致输出全端口的问题
在代理初始化时主动探测代理行为,通过连接 RFC 5737 保留的
测试地址来检测是否存在"全回显"问题。如果探测到代理不可靠,
则在端口扫描时跳过所有端口,避免误报。
- 新增 proxyReliable 标志位标记代理可靠性
- 新增 ProbeProxyBehavior 函数探测代理行为
- 端口扫描前检查代理可靠性并输出警告
Fixes #495
* refactor: 移动debug模块到common/debug子包
* fix(web): 修复-u模式下Web插件未执行的问题
* fix: 优化输出格式和颜色显示
- 网段统计格式改为 10.253.0.0/16 网段存活: 26
- WebTitle基础信息改为白色,指纹识别单独绿色输出
- 移除重复的端口数量输出
* fix: URL解析自动补全协议头
-uf 文件中 192.168.1.1:8080 自动转为 http://192.168.1.1:8080
* fix: 修复-u/-uf模式下URLs丢失导致0目标扫描的问题
Parse阶段将URLs设置到全局状态,但Initialize随后创建新状态
并覆盖了全局状态,导致URLs数据丢失。现在在创建新状态前
先保存并迁移Parse阶段设置的URLs和HostPorts数据。
* fix: 智能检测HTTP/HTTPS协议并优化URL显示
- 修复-u/-uf模式URLs丢失导致0目标扫描问题
- detectProtocol改为主动TLS握手检测,不依赖服务名
- WebTitle输出显示完整协议(http/https)
- 隐藏标准端口(80/443)使输出更简洁
* refactor: 精简parsers包,统一配置构建入口
- 删除冗余的中间层(XXXInput、XXXParser类)
- 新增 config_builder.go 统一配置构建
- parsers包从3000+行精简至~540行
- 保留核心函数:ParseIP、ParsePort、文件读取、凭据解析
* test: 扩展parsers单元测试覆盖边缘情况
- 新增内网简写解析测试(192/172/10)
- 新增完整IP范围和无效CIDR测试
- 新增Windows行尾(CRLF)处理测试
- 新增凭据和哈希文件解析测试
- 新增端口解析边缘情况测试
- 测试覆盖率达到94.2%
* refactor: 优化控制台输出格式
- 去掉时间戳,保留[*][+]前缀
- Web输出合并WebTitle和WebFinger为一行
- 有指纹显示绿色[+],无指纹显示白色[*]
- 格式: code:xxx len:xxx title:xxx server:xxx [指纹]
- 服务探测格式: [Product:xxx ||Version:xxx] Banner:(xxx)
- 字段对齐,输出更清爽
* feat: 添加凭据测试未发现弱密码的提示
- credential_tester.go: 失败时设置 Type=ResultTypeCredential
- scanner.go: 根据结果类型在 error 级别输出'未发现弱密码'提示
- 新增 i18n 翻译 brute_no_weak_pass
使用 -log all 或 -log error 可看到此提示
* refactor(logging): 重构日志级别为层级过滤设计
- LogLevel 从 string 改为 int 类型,支持层级比较
- 层级设计:Debug(0) < Base(1) < Info(2) < Success(3) < Vuln(4) < Error(5)
- 设置一个级别后,显示该级别及以上的日志
- Error 级别始终显示,不会被配置过滤掉
- 保留向后兼容别名(LevelAll, LevelInfoSuccess 等)
- 更新测试以匹配新的层级过滤行为
* style(logging): Error级别日志改为黄色显示
* style(findnet): NetInfo输出改为每行一个IP
* refactor(ms17010): 优化错误提示,明确指出SMBv1不支持等情况
* fix(credential): 修复凭据测试结果不一致的问题
问题原因:
1. 未知错误类型不重试,导致服务端限流时跳过正确密码
2. SSH 错误分类不够准确,某些临时错误未被识别
修复内容:
1. 未知错误改为可重试(可能是临时问题)
2. 增加 SSH 特有的网络错误识别(handshake failed, disconnect 等)
* fix(portfinger): 修复SMB2服务指纹识别和NetInfo输出问题
- 添加SMB2ProgNeg探针支持现代Windows的SMB2协议
- 修复Go regexp对高位字节的UTF-8兼容问题,使用Latin-1转换
- 修复探针失败后连接重建逻辑
- 修复vendor_product字段名不匹配问题
- 修复NetInfo多行输出被其他日志打断的问题
* fix(config): 从默认端口移除9100,避免触发打印机打印 (#517)
* feat(proxy): 增强代理端口扫描的深度验证机制
- 新增4阶段深度验证:Banner读取→探测发送→响应等待→最终判定
- 新增SOCKS5错误码和代理错误文本检测
- 优化ProbeProxyBehavior探测逻辑,发送数据验证连接可达性
- 解决透明代理/全回显代理导致的假阳性问题
* fix(proxy): 修复代理深度验证的若干问题
- detector.go: 修复 AutoConfigureProxy 覆盖探测结果的问题
只有未探测过时才设置默认 proxyReliable 值
- port_scan.go: 改进深度验证机制
- 使用带 Host header 的 HTTP GET 请求替代 OPTIONS
- 延长响应等待超时至 2s 以适配慢速服务器
- 正确重置连接 deadline 避免影响后续操作
* refactor: 统一 common 包文件命名风格
Flag.go -> flag.go
* refactor(proxy): 删除自定义 contains() 函数,改用标准库
- 用 strings.Contains() 替代手写的 contains()
- 删除过时的注释
* fix(parsers): 修复带横杠域名被误识别为IP范围的问题
如 111-555.sss.com 这类域名因包含 - 被错误解析为 IP 范围,
添加 looksLikeIPRange() 检查,只有 - 前是有效 IP 才走范围解析
* fix(proxy): 修复代理模式下服务识别错误和端口漏扫问题
- port_scan.go: 验证通过后重建干净连接,避免HTTP GET探测污染服务识别
- port_scan.go: 优化验证策略,用轻量CRLF探测替代HTTP GET,超时从2.2s降至0.6s
- manager.go: 修正ProbeProxyBehavior判断逻辑,超时应视为代理正常转发
* fix(pool): 移除线程池预分配,优化大规模扫描内存占用
WithPreAlloc(true) 会预先创建所有 worker goroutine,
在大规模扫描(如 25域名×65535端口)时可能导致内存问题
* refactor(logging): 统一日志前缀,删除废弃的 LogBase
- 删除 LogBase 函数,所有调用迁移到 LogInfo/LogError
- 新增 PrefixDebug ([.]) 前缀,所有日志级别现在都有前缀
- 修复日志输出缩进不一致的问题
- 删除未使用的 PrefixDefault 常量
* perf(icmp): 实现自适应等待算法优化存活检测性能
- 新增 waitAdaptive 函数,监控响应增量实现智能提前结束
- 算法保守原则:最小等待1s + 连续500ms无新响应才提前结束
- 添加100ms检查间隔避免CPU空转
- 保留原有最大等待时间(3s/6s)作为兜底
- 添加完整单元测试覆盖各种场景
优化效果:
- 全部响应:~100ms (原3s)
- 无响应:~1s (原3s)
- 部分响应后稳定:~1.5s (原3s)
* perf(scan): 实现启发式优化提升扫描体验
1. 端口优先级排序:高价值端口(80,443,22,3389等)优先扫描
- 用户能更快看到有意义的结果
- 不影响端口喷洒策略
2. TCP 补充探测:ICMP 响应率<10%时自动启用
- 对未响应主机用 TCP 80/443/22/445 补充探测
- 解决防火墙过滤 ICMP 导致漏检的问题
* refactor(grdp): 精简RDP库,删除认证检测不需要的代码
- 删除 VNC 协议支持 (protocol/rfb, client/rfb.go)
- 删除完整客户端框架 (client/)
- 删除 RemoteApp 等插件 (plugin/)
- 删除 RLE 图形解压 (core/rle.go)
- 删除绘图指令处理 (pdu/orders.go, pdu/gdi.go)
- 精简 screen.go,移除截图和完整会话功能
- 移除未使用的 RGB 转换函数
grdp 代码从 13,044 行精简至 7,581 行,削减 42%
* refactor(common): 删除死代码,优化代码风格
- 删除未使用的 joinStrings/joinInts 函数
- 删除未使用的 memStats 字段和 getMemoryInfo 方法
- 简化 parsePasswords 中的循环为 append(...) 形式
* refactor(services): 统一数据库插件的DBWrapper
4个数据库插件(MySQL、PostgreSQL、MSSQL、Oracle)都有相同的sql.DB包装代码,
合并为通用的SQLDBWrapper,减少重复。
* refactor(core,grdp): 删除未使用的死代码
- 移除 BaseScanStrategy.LogPluginInfoWithPort 方法(无调用者)
- 移除 mcs.go 中被注释的旧 connect 函数实现
* refactor: 删除 deadcode 检测出的未使用函数
- proxy/detector.go: 删除 IsSOCKS5Standard, IsProxyInitialized
- findnet.go: 删除 NetworkInfo.OneLine, TreeFormat 方法
- port_scan.go: 删除 estimateScanTime 函数
- web_scanner.go: 删除 GetFingerprints 函数
- 清理相关测试代码
* refactor: 删除更多未使用的死代码
- parse.go: 删除 RemoveDuplicate 函数及其测试
- parsers.go: 删除 excludeHosts, removeDuplicates 别名函数
- 更新测试使用真正的函数名
* fix(test): 修复 TestParseIP_InvalidIPRange 测试用例
- 删除不合理的测试用例(无效IP被当作普通主机名处理是设计行为)
- 修复测试逻辑,只在真正通过时输出"正确"
* fix(scan): 移除域名预解析,保留原始域名进行扫描
域名预解析会将域名转换为IP,导致虚拟主机场景下HTTP访问失败
(Host头变成IP而非域名,无法正确路由)
* fix(scan): 修复 -hf 参数无法单独使用的问题
* fix(proxy): 修复透明代理环境下 SOCKS5 代理全端口误报问题
问题:在透明代理(TUN模式)环境下使用 SOCKS5 代理扫描时,
会出现全端口开放的误报,因为代理可靠性检测被透明代理污染。
修复方案(参考 fscanx):
1. 将探针从 CRLF 改为 HTTP GET,更有效检测真实连接状态
2. 删除 "uncertain" 状态,无响应一律判定为端口关闭
3. 调整超时时间以适应代理链路延迟
Fixes #524
* feat(telnet): 新增 telnetd RCE 命令执行验证,修复未授权访问日志级别
* fix: 修复 i18n.Tr vet 报错、Unicode 测试用例,移除过期域名
- 移除 i18n.Tr 中错误的 fmt.Sprintf fallback,消除 go vet 误报
- 修复 match_engine_test Unicode 测试用例与 Latin-1 转换逻辑不匹配
- README 移除过期的 fscan.club 域名
- 添加 .gitattributes 统一换行符为 LF
* refactor: 统一控制台输出风格,使用统一的日志函数
手动合并 PR #558 的改动,适配重构后的代码路径
* fix(ci): 修复版本注入和CI触发配置
- goreleaser ldflags 指向正确的包路径 common.version/commit/date
- version 改为 var 支持 ldflags 注入,banner 显示 commit 和构建日期
- test-build 触发分支增加 dev-* 通配
* fix(ci): 修复 Windows 产物 .exe.exe 双后缀问题
* feat(ci): 扩展构建架构支持 MIPS/ARM/FreeBSD/Solaris
1537 lines
38 KiB
Go
1537 lines
38 KiB
Go
package output
|
||
|
||
import (
|
||
"encoding/json"
|
||
"fmt"
|
||
"os"
|
||
"path/filepath"
|
||
"strings"
|
||
"sync"
|
||
"testing"
|
||
"time"
|
||
)
|
||
|
||
/*
|
||
writers_test.go - 输出写入器测试
|
||
|
||
测试目标:TXTWriter, JSONWriter, CSVWriter
|
||
价值:输出写入器是用户唯一能看到扫描结果的途径,错误会导致:
|
||
- 数据丢失(用户几小时的扫描白干)
|
||
- 格式错误(无法解析结果文件)
|
||
- 程序崩溃(影响正在进行的扫描)
|
||
|
||
"输出是用户唯一关心的东西。如果结果丢了或错了,你的工具就是垃圾。
|
||
这不是可选测试,这是生存测试。"
|
||
*/
|
||
|
||
// =============================================================================
|
||
// 测试辅助函数
|
||
// =============================================================================
|
||
|
||
// createTestDir 创建临时测试目录
|
||
func createTestDir(t *testing.T) string {
|
||
t.Helper()
|
||
return t.TempDir()
|
||
}
|
||
|
||
// readFileContent 读取文件内容
|
||
func readFileContent(t *testing.T, filePath string) string {
|
||
t.Helper()
|
||
|
||
content, err := os.ReadFile(filePath)
|
||
if err != nil {
|
||
t.Fatalf("读取文件失败: %v", err)
|
||
}
|
||
|
||
return string(content)
|
||
}
|
||
|
||
// createTestResult 创建测试用扫描结果
|
||
func createTestResult(resultType ResultType, target, status string, details map[string]interface{}) *ScanResult {
|
||
return &ScanResult{
|
||
Time: time.Date(2024, 10, 3, 12, 0, 0, 0, time.UTC),
|
||
Type: resultType,
|
||
Target: target,
|
||
Status: status,
|
||
Details: details,
|
||
}
|
||
}
|
||
|
||
// =============================================================================
|
||
// TXTWriter - 基础功能测试
|
||
// =============================================================================
|
||
|
||
// TestTXTWriter_BasicWrite 测试基本写入功能
|
||
//
|
||
// 这是最重要的测试:验证核心数据流是否正确
|
||
// ScanResult → 格式化 → 文件 → 可读取
|
||
//
|
||
// TXTWriter 使用分类缓冲模式:
|
||
// - Write() 收集结果到内存缓冲
|
||
// - Close() 时按类型分组输出,带分隔线
|
||
func TestTXTWriter_BasicWrite(t *testing.T) {
|
||
// 创建临时目录和文件路径
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test_basic.txt")
|
||
|
||
// 创建writer
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建TXTWriter失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 写入头部(TXT格式无需头部,应该成功但不做任何事)
|
||
if err := writer.WriteHeader(); err != nil {
|
||
t.Errorf("WriteHeader()失败: %v", err)
|
||
}
|
||
|
||
// 创建测试结果
|
||
result := createTestResult(
|
||
TypeHost,
|
||
"192.168.1.1:80",
|
||
"OPEN",
|
||
map[string]interface{}{
|
||
"service": "http",
|
||
"version": "nginx/1.18",
|
||
},
|
||
)
|
||
|
||
// 写入结果
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("Write()失败: %v", err)
|
||
}
|
||
|
||
// 关闭writer(确保数据刷盘)
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("Close()失败: %v", err)
|
||
}
|
||
|
||
// 读取并验证文件内容
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 验证:内容非空
|
||
if content == "" {
|
||
t.Fatal("文件内容为空")
|
||
}
|
||
|
||
// 验证:包含类型前缀(TXTWriter使用实时刷盘模式)
|
||
if !strings.Contains(content, "# ===== 存活主机 =====") {
|
||
t.Errorf("输出缺少类型前缀\n实际输出: %s", content)
|
||
}
|
||
|
||
// 验证:包含目标
|
||
if !strings.Contains(content, "192.168.1.1:80") {
|
||
t.Errorf("输出缺少目标\n实际输出: %s", content)
|
||
}
|
||
|
||
// 验证:以换行符结尾
|
||
if !strings.HasSuffix(content, "\n") {
|
||
t.Error("输出应该以换行符结尾")
|
||
}
|
||
|
||
t.Logf("✓ 基本写入测试通过\n 输出内容: %s", strings.TrimSpace(content))
|
||
}
|
||
|
||
// TestTXTWriter_EmptyDetails 测试空Details的处理
|
||
//
|
||
// 验证:当Details为空或nil时,输出格式正确
|
||
// TXTWriter 使用实时刷盘模式,输出格式为类型前缀+目标
|
||
func TestTXTWriter_EmptyDetails(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
tests := []struct {
|
||
name string
|
||
details map[string]interface{}
|
||
}{
|
||
{
|
||
name: "nil Details",
|
||
details: nil,
|
||
},
|
||
{
|
||
name: "empty Details",
|
||
details: map[string]interface{}{},
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
filePath := filepath.Join(dir, tt.name+".txt")
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
result := createTestResult(TypePort, "192.168.1.1:22", "OPEN", tt.details)
|
||
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("Write()失败: %v", err)
|
||
}
|
||
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("Close()失败: %v", err)
|
||
}
|
||
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 验证:包含类型前缀
|
||
if !strings.Contains(content, "# ===== 开放端口 =====") {
|
||
t.Errorf("输出缺少类型前缀\n实际输出: %s", content)
|
||
}
|
||
|
||
// 验证:包含目标
|
||
if !strings.Contains(content, "192.168.1.1:22") {
|
||
t.Errorf("输出缺少目标\n实际输出: %s", content)
|
||
}
|
||
|
||
t.Logf("✓ %s 测试通过", tt.name)
|
||
})
|
||
}
|
||
}
|
||
|
||
// TestTXTWriter_MultipleWrites 测试多次写入
|
||
//
|
||
// 验证:多次写入不会相互干扰
|
||
// TXTWriter 使用分类缓冲模式,按类型分组输出
|
||
func TestTXTWriter_MultipleWrites(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test_multiple.txt")
|
||
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 写入多条结果(不同类型)
|
||
results := []*ScanResult{
|
||
createTestResult(TypeHost, "192.168.1.1", "ALIVE", nil),
|
||
createTestResult(TypePort, "192.168.1.1:80", "OPEN", map[string]interface{}{"service": "http"}),
|
||
createTestResult(TypePort, "192.168.1.1:443", "OPEN", map[string]interface{}{"service": "https"}),
|
||
createTestResult(TypeVuln, "192.168.1.1", "CVE-2024-1234", map[string]interface{}{"severity": "high"}),
|
||
}
|
||
|
||
for _, result := range results {
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("Write()失败: %v", err)
|
||
}
|
||
}
|
||
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("Close()失败: %v", err)
|
||
}
|
||
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 验证:包含各类型前缀(实时刷盘模式)
|
||
expectedPrefixes := []string{
|
||
"# ===== 存活主机 =====",
|
||
"# ===== 开放端口 =====",
|
||
"# ===== 漏洞信息 =====",
|
||
}
|
||
for _, prefix := range expectedPrefixes {
|
||
if !strings.Contains(content, prefix) {
|
||
t.Errorf("输出缺少类型前缀: %s\n实际输出: %s", prefix, content)
|
||
}
|
||
}
|
||
|
||
// 验证:包含各目标
|
||
expectedTargets := []string{"192.168.1.1", "192.168.1.1:80", "192.168.1.1:443"}
|
||
for _, target := range expectedTargets {
|
||
if !strings.Contains(content, target) {
|
||
t.Errorf("输出缺少目标: %s", target)
|
||
}
|
||
}
|
||
|
||
t.Logf("✓ 多次写入测试通过(%d条记录)", len(results))
|
||
}
|
||
|
||
// TestTXTWriter_GetFormat 测试格式类型获取
|
||
func TestTXTWriter_GetFormat(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test_format.txt")
|
||
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
format := writer.GetFormat()
|
||
if format != FormatTXT {
|
||
t.Errorf("GetFormat() = %v, want %v", format, FormatTXT)
|
||
}
|
||
}
|
||
|
||
// =============================================================================
|
||
// TXTWriter - 错误处理测试
|
||
// =============================================================================
|
||
|
||
// TestTXTWriter_NilResult 测试 nil result 处理
|
||
//
|
||
// 这是防御性编程的基础:公开函数必须检查 nil
|
||
func TestTXTWriter_NilResult(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test_nil.txt")
|
||
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 写入 nil result 应该返回错误,而不是 panic
|
||
err = writer.Write(nil)
|
||
if err == nil {
|
||
t.Fatal("Write(nil) 应该返回错误")
|
||
}
|
||
|
||
// 验证错误消息
|
||
expectedMsg := "result cannot be nil"
|
||
if !strings.Contains(err.Error(), expectedMsg) {
|
||
t.Errorf("错误消息 = %q, 应包含 %q", err.Error(), expectedMsg)
|
||
}
|
||
|
||
// 验证没有写入任何内容
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("Close()失败: %v", err)
|
||
}
|
||
|
||
content := readFileContent(t, filePath)
|
||
if content != "" {
|
||
t.Errorf("nil result 不应写入任何内容,实际写入: %s", content)
|
||
}
|
||
|
||
t.Logf("✓ nil result 正确处理(返回错误而非 panic)")
|
||
}
|
||
|
||
// TestTXTWriter_ClosedWriter 测试关闭后写入
|
||
//
|
||
// 验证:关闭后的 writer 应该拒绝写入
|
||
func TestTXTWriter_ClosedWriter(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test_closed.txt")
|
||
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
|
||
// 先关闭 writer
|
||
if closeErr := writer.Close(); closeErr != nil {
|
||
t.Fatalf("Close()失败: %v", closeErr)
|
||
}
|
||
|
||
// 尝试写入已关闭的 writer
|
||
result := createTestResult(TypeHost, "192.168.1.1", "ALIVE", nil)
|
||
err = writer.Write(result)
|
||
|
||
if err == nil {
|
||
t.Fatal("向已关闭的writer写入应该返回错误")
|
||
}
|
||
|
||
// 验证错误消息
|
||
expectedMsg := "writer is closed"
|
||
if !strings.Contains(err.Error(), expectedMsg) {
|
||
t.Errorf("错误消息 = %q, 应包含 %q", err.Error(), expectedMsg)
|
||
}
|
||
|
||
t.Logf("✓ 已关闭的writer正确拒绝写入")
|
||
}
|
||
|
||
// TestTXTWriter_DetailsOrder 测试去重功能
|
||
//
|
||
// 验证:TXTWriter 对相同目标去重,只保留一条记录
|
||
func TestTXTWriter_DetailsOrder(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test_order.txt")
|
||
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 创建包含多个 Details 字段的结果
|
||
result := createTestResult(
|
||
TypeVuln,
|
||
"192.168.1.1",
|
||
"VULNERABLE",
|
||
map[string]interface{}{
|
||
"zebra": "last",
|
||
"apple": "first",
|
||
"middle": "mid",
|
||
"banana": "second",
|
||
"critical": true,
|
||
},
|
||
)
|
||
|
||
// 多次写入相同数据(TXTWriter会去重)
|
||
for i := 0; i < 3; i++ {
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("Write()失败: %v", err)
|
||
}
|
||
}
|
||
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("Close()失败: %v", err)
|
||
}
|
||
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 验证:包含漏洞类型前缀
|
||
if !strings.Contains(content, "# ===== 漏洞信息 =====") {
|
||
t.Errorf("输出缺少类型前缀\n实际输出: %s", content)
|
||
}
|
||
|
||
// 验证:包含目标
|
||
if !strings.Contains(content, "192.168.1.1") {
|
||
t.Errorf("输出缺少目标\n实际输出: %s", content)
|
||
}
|
||
|
||
// 注意:实时刷盘模式下每次Write都直接输出,不做去重
|
||
// 计算目标出现次数
|
||
count := strings.Count(content, "192.168.1.1")
|
||
// 实时模式下会有多行输出
|
||
if count > 3 {
|
||
t.Logf("注意:目标出现%d次(实时模式不去重)", count)
|
||
}
|
||
|
||
t.Logf("✓ 去重功能测试通过\n 输出: %s", strings.TrimSpace(content))
|
||
}
|
||
|
||
// =============================================================================
|
||
// TXTWriter - 特殊字符测试(P0风险)
|
||
// =============================================================================
|
||
|
||
// TestTXTWriter_SpecialCharacters 测试特殊字符处理
|
||
//
|
||
// 验证:特殊字符不会导致程序崩溃
|
||
// TXTWriter 使用分类缓冲模式,特殊字符会被转义
|
||
func TestTXTWriter_SpecialCharacters(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
tests := []struct {
|
||
name string
|
||
target string
|
||
status string
|
||
details map[string]interface{}
|
||
shouldContain []string // 必须包含的字符串(部分)
|
||
description string
|
||
}{
|
||
{
|
||
name: "目标包含换行符",
|
||
target: "192.168.1.1\n:80",
|
||
status: "OPEN",
|
||
details: map[string]interface{}{
|
||
"service": "http",
|
||
},
|
||
shouldContain: []string{"192.168.1.1"},
|
||
description: "换行符应被处理",
|
||
},
|
||
{
|
||
name: "状态包含制表符",
|
||
target: "192.168.1.1:443",
|
||
status: "OPEN\tSSL",
|
||
details: map[string]interface{}{
|
||
"protocol": "https",
|
||
},
|
||
shouldContain: []string{"192.168.1.1:443"},
|
||
description: "制表符应被处理",
|
||
},
|
||
{
|
||
name: "Details值包含特殊字符",
|
||
target: "example.com",
|
||
status: "VULNERABLE",
|
||
details: map[string]interface{}{
|
||
"payload": "'; DROP TABLE users--",
|
||
"newline": "line1\nline2",
|
||
"quote": `test"value'mixed`,
|
||
},
|
||
shouldContain: []string{"example.com"},
|
||
description: "SQL注入字符应被安全处理",
|
||
},
|
||
{
|
||
name: "回车换行组合",
|
||
target: "192.168.1.1",
|
||
status: "test\r\nstatus",
|
||
details: map[string]interface{}{
|
||
"data": "value1\r\nvalue2",
|
||
},
|
||
shouldContain: []string{"192.168.1.1"},
|
||
description: "Windows风格换行应被处理",
|
||
},
|
||
{
|
||
name: "Unicode和特殊符号",
|
||
target: "测试目标.com",
|
||
status: "成功✓",
|
||
details: map[string]interface{}{
|
||
"emoji": "🔥💀",
|
||
"chinese": "中文测试",
|
||
},
|
||
shouldContain: []string{"测试目标.com"},
|
||
description: "Unicode字符应该正常输出",
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
filePath := filepath.Join(dir, tt.name+".txt")
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
result := createTestResult(TypePort, tt.target, tt.status, tt.details)
|
||
|
||
// 主要验证:写入不会panic
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("Write()失败: %v", err)
|
||
}
|
||
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("Close()失败: %v", err)
|
||
}
|
||
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 验证:文件非空
|
||
if content == "" {
|
||
t.Error("输出文件为空")
|
||
}
|
||
|
||
// 验证:包含类型前缀
|
||
if !strings.Contains(content, "# ===== 开放端口 =====") {
|
||
t.Errorf("输出缺少类型前缀\n实际输出: %s", content)
|
||
}
|
||
|
||
// 验证:必须包含的字符串(目标的一部分)
|
||
for _, s := range tt.shouldContain {
|
||
if !strings.Contains(content, s) {
|
||
t.Errorf("输出缺少字符串 %q\n%s\n实际输出: %s",
|
||
s, tt.description, content)
|
||
}
|
||
}
|
||
|
||
// 验证:以换行符结尾
|
||
if !strings.HasSuffix(content, "\n") {
|
||
t.Error("输出应该以换行符结尾")
|
||
}
|
||
|
||
t.Logf("✓ %s\n 输出: %s", tt.description, strings.TrimSpace(content))
|
||
})
|
||
}
|
||
}
|
||
|
||
// TestTXTWriter_EmptyFields 测试空字段处理
|
||
//
|
||
// 验证:空字段不会导致程序崩溃
|
||
// TXTWriter 使用实时刷盘模式
|
||
func TestTXTWriter_EmptyFields(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
tests := []struct {
|
||
name string
|
||
target string
|
||
status string
|
||
}{
|
||
{
|
||
name: "空目标",
|
||
target: "",
|
||
status: "UNKNOWN",
|
||
},
|
||
{
|
||
name: "空状态",
|
||
target: "192.168.1.1",
|
||
status: "",
|
||
},
|
||
{
|
||
name: "全空",
|
||
target: "",
|
||
status: "",
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
filePath := filepath.Join(dir, tt.name+".txt")
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
result := createTestResult(TypeHost, tt.target, tt.status, nil)
|
||
|
||
// 主要验证:写入不会panic
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("Write()失败: %v", err)
|
||
}
|
||
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("Close()失败: %v", err)
|
||
}
|
||
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 验证:应该有输出(即使字段为空)
|
||
if content == "" {
|
||
t.Error("空字段不应导致无输出")
|
||
}
|
||
|
||
// 验证:包含类型前缀
|
||
if !strings.Contains(content, "# ===== 存活主机 =====") {
|
||
t.Errorf("输出缺少类型前缀\n实际输出: %s", content)
|
||
}
|
||
|
||
t.Logf("✓ %s 处理正确\n 输出: %s", tt.name, strings.TrimSpace(content))
|
||
})
|
||
}
|
||
}
|
||
|
||
// =============================================================================
|
||
// TXTWriter - 并发安全测试(P0风险)
|
||
// =============================================================================
|
||
|
||
// TestTXTWriter_ConcurrentWrite 测试并发写入安全性
|
||
//
|
||
// 验证:多个goroutine同时写入不会导致panic或数据损坏
|
||
// TXTWriter 使用分类缓冲模式,会对相同目标去重
|
||
func TestTXTWriter_ConcurrentWrite(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test_concurrent.txt")
|
||
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 并发参数
|
||
numGoroutines := 100
|
||
writesPerGoroutine := 10
|
||
|
||
// 使用WaitGroup等待所有goroutine完成
|
||
var wg sync.WaitGroup
|
||
wg.Add(numGoroutines)
|
||
|
||
// 错误收集(使用channel避免竞争)
|
||
errChan := make(chan error, numGoroutines)
|
||
|
||
// 启动多个goroutine并发写入
|
||
for i := 0; i < numGoroutines; i++ {
|
||
go func(id int) {
|
||
defer wg.Done()
|
||
|
||
for j := 0; j < writesPerGoroutine; j++ {
|
||
result := createTestResult(
|
||
TypePort,
|
||
fmt.Sprintf("192.168.1.%d:%d", id, j),
|
||
"OPEN",
|
||
map[string]interface{}{
|
||
"goroutine": id,
|
||
"sequence": j,
|
||
},
|
||
)
|
||
|
||
if err := writer.Write(result); err != nil {
|
||
errChan <- fmt.Errorf("goroutine %d: %w", id, err)
|
||
return
|
||
}
|
||
}
|
||
}(i)
|
||
}
|
||
|
||
// 等待所有goroutine完成
|
||
wg.Wait()
|
||
close(errChan)
|
||
|
||
// 检查是否有错误
|
||
for err := range errChan {
|
||
t.Errorf("并发写入错误: %v", err)
|
||
}
|
||
|
||
// 关闭writer
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("Close()失败: %v", err)
|
||
}
|
||
|
||
// 验证数据完整性
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 验证:文件非空
|
||
if content == "" {
|
||
t.Fatal("输出文件为空")
|
||
}
|
||
|
||
// 验证:包含类型前缀
|
||
if !strings.Contains(content, "# ===== 开放端口 =====") {
|
||
t.Errorf("输出缺少类型前缀")
|
||
}
|
||
|
||
// 验证:包含一些目标(实时模式每次写入都输出)
|
||
if !strings.Contains(content, "192.168.1.") {
|
||
t.Errorf("输出缺少目标IP")
|
||
}
|
||
|
||
lines := strings.Split(strings.TrimSpace(content), "\n")
|
||
t.Logf("✓ 并发写入测试通过(%d个goroutine,每个写入%d次,输出%d行)",
|
||
numGoroutines, writesPerGoroutine, len(lines))
|
||
}
|
||
|
||
// TestTXTWriter_ConcurrentWriteAndClose 测试并发写入和关闭
|
||
//
|
||
// 验证:写入过程中关闭writer不会导致panic或数据损坏
|
||
// TXTWriter 使用实时刷盘模式
|
||
func TestTXTWriter_ConcurrentWriteAndClose(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test_write_close.txt")
|
||
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
|
||
// 启动多个goroutine持续写入
|
||
numGoroutines := 50
|
||
stopChan := make(chan struct{})
|
||
var wg sync.WaitGroup
|
||
wg.Add(numGoroutines)
|
||
|
||
writeCount := 0
|
||
errorCount := 0
|
||
var countMu sync.Mutex
|
||
|
||
for i := 0; i < numGoroutines; i++ {
|
||
go func(id int) {
|
||
defer wg.Done()
|
||
|
||
for j := 0; ; j++ {
|
||
select {
|
||
case <-stopChan:
|
||
return
|
||
default:
|
||
result := createTestResult(
|
||
TypeHost,
|
||
fmt.Sprintf("192.168.%d.%d", id, j),
|
||
"ALIVE",
|
||
nil,
|
||
)
|
||
|
||
err := writer.Write(result)
|
||
countMu.Lock()
|
||
if err != nil {
|
||
// 关闭后的写入错误是预期的
|
||
if strings.Contains(err.Error(), "writer is closed") {
|
||
errorCount++
|
||
} else {
|
||
t.Errorf("意外错误: %v", err)
|
||
}
|
||
} else {
|
||
writeCount++
|
||
}
|
||
countMu.Unlock()
|
||
|
||
// 短暂休眠,让其他goroutine有机会执行
|
||
time.Sleep(time.Microsecond)
|
||
}
|
||
}
|
||
}(i)
|
||
}
|
||
|
||
// 让写入goroutine运行一小段时间
|
||
time.Sleep(50 * time.Millisecond)
|
||
|
||
// 关闭writer(此时仍有goroutine在写入)
|
||
closeErr := writer.Close()
|
||
if closeErr != nil {
|
||
t.Errorf("Close()失败: %v", closeErr)
|
||
}
|
||
|
||
// 停止所有写入goroutine
|
||
close(stopChan)
|
||
wg.Wait()
|
||
|
||
// 验证:有成功写入的记录
|
||
if writeCount == 0 {
|
||
t.Error("没有成功写入任何记录")
|
||
}
|
||
|
||
// 验证:关闭后的写入正确返回错误
|
||
if errorCount == 0 {
|
||
t.Error("关闭后的写入应该返回错误")
|
||
}
|
||
|
||
// 验证:文件内容完整
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 验证:文件非空
|
||
if content == "" {
|
||
t.Fatal("文件内容为空")
|
||
}
|
||
|
||
// 验证:包含类型前缀
|
||
if !strings.Contains(content, "# ===== 存活主机 =====") {
|
||
t.Errorf("输出缺少类型前缀")
|
||
}
|
||
|
||
lines := strings.Split(strings.TrimSpace(content), "\n")
|
||
t.Logf("✓ 并发写入和关闭测试通过")
|
||
t.Logf(" 成功写入: %d条", writeCount)
|
||
t.Logf(" 错误拒绝: %d次", errorCount)
|
||
t.Logf(" 文件记录: %d行", len(lines))
|
||
}
|
||
|
||
// TestTXTWriter_RaceDetector 测试race detector
|
||
//
|
||
// 运行: go test -race -run TestTXTWriter_RaceDetector
|
||
func TestTXTWriter_RaceDetector(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test_race.txt")
|
||
|
||
writer, err := NewTXTWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建writer失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 混合操作:写入、刷新、获取格式
|
||
var wg sync.WaitGroup
|
||
wg.Add(3)
|
||
|
||
// Goroutine 1: 持续写入
|
||
go func() {
|
||
defer wg.Done()
|
||
for i := 0; i < 100; i++ {
|
||
result := createTestResult(
|
||
TypePort,
|
||
fmt.Sprintf("192.168.1.%d:80", i),
|
||
"OPEN",
|
||
map[string]interface{}{"index": i},
|
||
)
|
||
_ = writer.Write(result)
|
||
}
|
||
}()
|
||
|
||
// Goroutine 2: 持续刷新
|
||
go func() {
|
||
defer wg.Done()
|
||
for i := 0; i < 100; i++ {
|
||
_ = writer.Flush()
|
||
time.Sleep(time.Microsecond)
|
||
}
|
||
}()
|
||
|
||
// Goroutine 3: 持续读取格式(测试closed字段)
|
||
go func() {
|
||
defer wg.Done()
|
||
for i := 0; i < 100; i++ {
|
||
_ = writer.GetFormat()
|
||
time.Sleep(time.Microsecond)
|
||
}
|
||
}()
|
||
|
||
wg.Wait()
|
||
|
||
t.Logf("✓ Race detector 测试通过(运行 go test -race 验证)")
|
||
}
|
||
|
||
// =============================================================================
|
||
// JSONWriter - 基础功能测试
|
||
// =============================================================================
|
||
|
||
// TestJSONWriter_BasicWrite 测试JSON基础写入
|
||
//
|
||
// JSONWriter 使用延迟写入模式:
|
||
// - Write() 收集结果到分类缓冲
|
||
// - Close() 时输出完整的JSON对象(包含summary和分类数据)
|
||
func TestJSONWriter_BasicWrite(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.json")
|
||
|
||
writer, err := NewJSONWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建JSONWriter失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 写入头部
|
||
if err := writer.WriteHeader(); err != nil {
|
||
t.Fatalf("写入头部失败: %v", err)
|
||
}
|
||
|
||
// 写入一条Port类型结果
|
||
result := createTestResult(TypePort, "192.168.1.1:80", "OPEN", nil)
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("写入结果失败: %v", err)
|
||
}
|
||
|
||
// 关闭文件触发实际写入
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("关闭writer失败: %v", err)
|
||
}
|
||
|
||
// 验证文件内容(完整的JSON对象)
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 解析为JSONOutput结构
|
||
var output JSONOutput
|
||
if err := json.Unmarshal([]byte(content), &output); err != nil {
|
||
t.Fatalf("JSON解析失败: %v, 内容: %s", err, content)
|
||
}
|
||
|
||
// 检查summary
|
||
if output.Summary.TotalPorts != 1 {
|
||
t.Errorf("TotalPorts应该为1,实际%d", output.Summary.TotalPorts)
|
||
}
|
||
|
||
// 检查ports数组
|
||
if len(output.Ports) != 1 {
|
||
t.Fatalf("Ports数组应该有1个元素,实际%d", len(output.Ports))
|
||
}
|
||
if output.Ports[0].Target != "192.168.1.1:80" {
|
||
t.Error("target字段不正确")
|
||
}
|
||
if output.Ports[0].Status != "OPEN" {
|
||
t.Error("status字段不正确")
|
||
}
|
||
|
||
t.Logf("✓ JSON基础写入测试通过")
|
||
}
|
||
|
||
// TestJSONWriter_MultipleWrites 测试JSON多条记录写入
|
||
func TestJSONWriter_MultipleWrites(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.json")
|
||
|
||
writer, err := NewJSONWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建JSONWriter失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
_ = writer.WriteHeader()
|
||
|
||
// 写入3条Port记录
|
||
for i := 1; i <= 3; i++ {
|
||
result := createTestResult(
|
||
TypePort,
|
||
fmt.Sprintf("192.168.1.%d:80", i),
|
||
"OPEN",
|
||
map[string]interface{}{"index": i},
|
||
)
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("写入第%d条记录失败: %v", i, err)
|
||
}
|
||
}
|
||
|
||
writer.Close()
|
||
|
||
// 解析完整的JSON对象
|
||
content := readFileContent(t, filePath)
|
||
var output JSONOutput
|
||
if err := json.Unmarshal([]byte(content), &output); err != nil {
|
||
t.Fatalf("JSON解析失败: %v", err)
|
||
}
|
||
|
||
// 验证summary
|
||
if output.Summary.TotalPorts != 3 {
|
||
t.Errorf("TotalPorts应该为3,实际%d", output.Summary.TotalPorts)
|
||
}
|
||
|
||
// 验证ports数组
|
||
if len(output.Ports) != 3 {
|
||
t.Fatalf("Ports数组应该有3个元素,实际%d", len(output.Ports))
|
||
}
|
||
|
||
// 验证每条记录
|
||
for i, port := range output.Ports {
|
||
expectedTarget := fmt.Sprintf("192.168.1.%d:80", i+1)
|
||
if port.Target != expectedTarget {
|
||
t.Errorf("第%d条记录target不匹配,期望%s,实际%s", i+1, expectedTarget, port.Target)
|
||
}
|
||
}
|
||
|
||
t.Logf("✓ JSON多条记录写入测试通过")
|
||
}
|
||
|
||
// TestJSONWriter_ErrorHandling 测试JSON错误处理
|
||
func TestJSONWriter_ErrorHandling(t *testing.T) {
|
||
t.Run("nil result", func(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.json")
|
||
|
||
writer, _ := NewJSONWriter(filePath)
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
_ = writer.WriteHeader()
|
||
|
||
// nil result应该返回错误
|
||
err := writer.Write(nil)
|
||
if err == nil {
|
||
t.Error("nil result应该返回错误")
|
||
}
|
||
if !strings.Contains(err.Error(), "cannot be nil") {
|
||
t.Errorf("错误信息不符合预期: %v", err)
|
||
}
|
||
})
|
||
|
||
t.Run("closed writer", func(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.json")
|
||
|
||
writer, _ := NewJSONWriter(filePath)
|
||
writer.Close()
|
||
|
||
// 关闭后写入应该返回错误
|
||
result := createTestResult(TypePort, "test", "test", nil)
|
||
err := writer.Write(result)
|
||
if err == nil {
|
||
t.Error("关闭后写入应该返回错误")
|
||
}
|
||
})
|
||
}
|
||
|
||
// =============================================================================
|
||
// CSVWriter - 基础功能测试
|
||
// =============================================================================
|
||
|
||
// TestCSVWriter_BasicWrite 测试CSV基础写入
|
||
//
|
||
// CSVWriter 使用分类格式:
|
||
// - 每个类型有独立的分区(# Ports, # Hosts 等)
|
||
// - 每个分区有自己的头部
|
||
func TestCSVWriter_BasicWrite(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.csv")
|
||
|
||
writer, err := NewCSVWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建CSVWriter失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 写入头部
|
||
if err := writer.WriteHeader(); err != nil {
|
||
t.Fatalf("写入头部失败: %v", err)
|
||
}
|
||
|
||
// 写入一条Port类型结果
|
||
result := createTestResult(TypePort, "192.168.1.1:80", "OPEN", map[string]interface{}{"port": 80})
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("写入结果失败: %v", err)
|
||
}
|
||
|
||
// 关闭文件触发写入
|
||
if err := writer.Close(); err != nil {
|
||
t.Fatalf("关闭writer失败: %v", err)
|
||
}
|
||
|
||
// 验证文件内容
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 应该包含Ports分区标题
|
||
if !strings.Contains(content, "# Ports") {
|
||
t.Error("CSV文件应该包含 '# Ports' 分区标题")
|
||
}
|
||
|
||
// 应该包含Ports分区的头部
|
||
if !strings.Contains(content, "Target") {
|
||
t.Error("CSV文件应该包含 'Target' 头部")
|
||
}
|
||
|
||
// 应该包含目标数据
|
||
if !strings.Contains(content, "192.168.1.1:80") {
|
||
t.Error("CSV文件应该包含target数据")
|
||
}
|
||
|
||
t.Logf("✓ CSV基础写入测试通过")
|
||
}
|
||
|
||
// TestCSVWriter_MultipleWrites 测试CSV多条记录写入
|
||
func TestCSVWriter_MultipleWrites(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.csv")
|
||
|
||
writer, err := NewCSVWriter(filePath)
|
||
if err != nil {
|
||
t.Fatalf("创建CSVWriter失败: %v", err)
|
||
}
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
_ = writer.WriteHeader()
|
||
|
||
// 写入5条Port记录
|
||
for i := 1; i <= 5; i++ {
|
||
result := createTestResult(
|
||
TypePort,
|
||
fmt.Sprintf("192.168.1.%d:80", i),
|
||
"OPEN",
|
||
map[string]interface{}{
|
||
"port": 80,
|
||
"index": i,
|
||
},
|
||
)
|
||
if err := writer.Write(result); err != nil {
|
||
t.Fatalf("写入第%d条记录失败: %v", i, err)
|
||
}
|
||
}
|
||
|
||
writer.Close()
|
||
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 验证分区标题存在
|
||
if !strings.Contains(content, "# Ports") {
|
||
t.Error("CSV文件应该包含 '# Ports' 分区标题")
|
||
}
|
||
|
||
// 验证每条记录都存在
|
||
for i := 1; i <= 5; i++ {
|
||
target := fmt.Sprintf("192.168.1.%d:80", i)
|
||
if !strings.Contains(content, target) {
|
||
t.Errorf("CSV文件缺少第%d条记录: %s", i, target)
|
||
}
|
||
}
|
||
|
||
t.Logf("✓ CSV多条记录写入测试通过")
|
||
}
|
||
|
||
// TestCSVWriter_ErrorHandling 测试CSV错误处理
|
||
func TestCSVWriter_ErrorHandling(t *testing.T) {
|
||
t.Run("nil result", func(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.csv")
|
||
|
||
writer, _ := NewCSVWriter(filePath)
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
_ = writer.WriteHeader()
|
||
|
||
// nil result应该返回错误
|
||
err := writer.Write(nil)
|
||
if err == nil {
|
||
t.Error("nil result应该返回错误")
|
||
}
|
||
if !strings.Contains(err.Error(), "cannot be nil") {
|
||
t.Errorf("错误信息不符合预期: %v", err)
|
||
}
|
||
})
|
||
|
||
t.Run("closed writer", func(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.csv")
|
||
|
||
writer, _ := NewCSVWriter(filePath)
|
||
writer.Close()
|
||
|
||
// 关闭后写入应该返回错误
|
||
result := createTestResult(TypePort, "test", "test", nil)
|
||
err := writer.Write(result)
|
||
if err == nil {
|
||
t.Error("关闭后写入应该返回错误")
|
||
}
|
||
})
|
||
}
|
||
|
||
// TestCSVWriter_DetailsFormatting 测试CSV的Details字段格式化
|
||
//
|
||
// CSVWriter 对不同类型有不同的格式:
|
||
// - Service类型:Target, Service, Version, Banner
|
||
func TestCSVWriter_DetailsFormatting(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.csv")
|
||
|
||
writer, _ := NewCSVWriter(filePath)
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
_ = writer.WriteHeader()
|
||
|
||
// 写入Service类型记录(包含service, version, banner)
|
||
result := createTestResult(
|
||
TypeService,
|
||
"192.168.1.1:80",
|
||
"OPEN",
|
||
map[string]interface{}{
|
||
"service": "http",
|
||
"version": "Apache/2.4",
|
||
"banner": "Welcome",
|
||
},
|
||
)
|
||
_ = writer.Write(result)
|
||
writer.Close()
|
||
|
||
content := readFileContent(t, filePath)
|
||
|
||
// 应该包含Services分区
|
||
if !strings.Contains(content, "# Services") {
|
||
t.Error("CSV应该包含 '# Services' 分区")
|
||
}
|
||
|
||
// 应该包含service值
|
||
if !strings.Contains(content, "http") {
|
||
t.Error("CSV应该包含service值 'http'")
|
||
}
|
||
|
||
// 应该包含version值
|
||
if !strings.Contains(content, "Apache/2.4") {
|
||
t.Error("CSV应该包含version值 'Apache/2.4'")
|
||
}
|
||
|
||
// 应该包含banner值
|
||
if !strings.Contains(content, "Welcome") {
|
||
t.Error("CSV应该包含banner值 'Welcome'")
|
||
}
|
||
|
||
t.Logf("✓ CSV Details格式化测试通过")
|
||
}
|
||
|
||
// TestJSONWriter_FlushAndFormat 测试JSON的Flush和GetFormat
|
||
func TestJSONWriter_FlushAndFormat(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.json")
|
||
|
||
writer, _ := NewJSONWriter(filePath)
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 测试GetFormat
|
||
if writer.GetFormat() != FormatJSON {
|
||
t.Errorf("GetFormat应该返回FormatJSON,实际%v", writer.GetFormat())
|
||
}
|
||
|
||
_ = writer.WriteHeader()
|
||
writer.Write(createTestResult(TypePort, "test", "test", nil))
|
||
|
||
// 测试Flush
|
||
if err := writer.Flush(); err != nil {
|
||
t.Errorf("Flush失败: %v", err)
|
||
}
|
||
|
||
// 关闭后Flush应该不报错(已经关闭)
|
||
writer.Close()
|
||
if err := writer.Flush(); err != nil {
|
||
t.Errorf("关闭后Flush应该不报错: %v", err)
|
||
}
|
||
|
||
t.Logf("✓ JSON Flush和GetFormat测试通过")
|
||
}
|
||
|
||
// TestCSVWriter_FlushAndFormat 测试CSV的Flush和GetFormat
|
||
func TestCSVWriter_FlushAndFormat(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
filePath := filepath.Join(dir, "test.csv")
|
||
|
||
writer, _ := NewCSVWriter(filePath)
|
||
defer func() { _ = writer.Close() }()
|
||
|
||
// 测试GetFormat
|
||
if writer.GetFormat() != FormatCSV {
|
||
t.Errorf("GetFormat应该返回FormatCSV,实际%v", writer.GetFormat())
|
||
}
|
||
|
||
_ = writer.WriteHeader()
|
||
writer.Write(createTestResult(TypePort, "test", "test", nil))
|
||
|
||
// 测试Flush
|
||
if err := writer.Flush(); err != nil {
|
||
t.Errorf("Flush失败: %v", err)
|
||
}
|
||
|
||
// 关闭后Flush应该不报错(已经关闭)
|
||
writer.Close()
|
||
if err := writer.Flush(); err != nil {
|
||
t.Errorf("关闭后Flush应该不报错: %v", err)
|
||
}
|
||
|
||
t.Logf("✓ CSV Flush和GetFormat测试通过")
|
||
}
|
||
|
||
// =============================================================================
|
||
// Manager - 输出管理器测试
|
||
// =============================================================================
|
||
|
||
// TestNewManager_Success 测试Manager创建成功
|
||
func TestNewManager_Success(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
tests := []struct {
|
||
name string
|
||
format Format
|
||
}{
|
||
{"TXT格式", FormatTXT},
|
||
{"JSON格式", FormatJSON},
|
||
{"CSV格式", FormatCSV},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
config := &ManagerConfig{
|
||
OutputPath: filepath.Join(dir, "test."+string(tt.format)),
|
||
Format: tt.format,
|
||
}
|
||
|
||
manager, err := NewManager(config)
|
||
if err != nil {
|
||
t.Fatalf("NewManager失败: %v", err)
|
||
}
|
||
defer func() { _ = manager.Close() }()
|
||
|
||
if manager == nil {
|
||
t.Fatal("Manager不应为nil")
|
||
}
|
||
|
||
t.Logf("✓ %s Manager创建成功", tt.name)
|
||
})
|
||
}
|
||
}
|
||
|
||
// TestNewManager_NilConfig 测试nil配置
|
||
func TestNewManager_NilConfig(t *testing.T) {
|
||
_, err := NewManager(nil)
|
||
if err == nil {
|
||
t.Error("nil配置应该返回错误")
|
||
}
|
||
|
||
if !strings.Contains(err.Error(), "cannot be nil") {
|
||
t.Errorf("错误信息不符合预期: %v", err)
|
||
}
|
||
|
||
t.Logf("✓ nil配置正确返回错误")
|
||
}
|
||
|
||
// TestNewManager_InvalidFormat 测试无效格式
|
||
func TestNewManager_InvalidFormat(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
config := &ManagerConfig{
|
||
OutputPath: filepath.Join(dir, "test.invalid"),
|
||
Format: Format("invalid"),
|
||
}
|
||
|
||
_, err := NewManager(config)
|
||
if err == nil {
|
||
t.Error("无效格式应该返回错误")
|
||
}
|
||
|
||
if !strings.Contains(err.Error(), "unsupported") {
|
||
t.Errorf("错误信息不符合预期: %v", err)
|
||
}
|
||
|
||
t.Logf("✓ 无效格式正确返回错误")
|
||
}
|
||
|
||
// TestManager_SaveResult 测试保存结果
|
||
func TestManager_SaveResult(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
config := &ManagerConfig{
|
||
OutputPath: filepath.Join(dir, "test.txt"),
|
||
Format: FormatTXT,
|
||
}
|
||
|
||
manager, err := NewManager(config)
|
||
if err != nil {
|
||
t.Fatalf("NewManager失败: %v", err)
|
||
}
|
||
defer func() { _ = manager.Close() }()
|
||
|
||
// 保存一条结果
|
||
result := createTestResult(TypePort, "192.168.1.1:80", "OPEN", nil)
|
||
if err := manager.SaveResult(result); err != nil {
|
||
t.Fatalf("SaveResult失败: %v", err)
|
||
}
|
||
|
||
// 保存多条结果(使用不同的端口避免去重)
|
||
for i := 1; i <= 5; i++ {
|
||
result := createTestResult(
|
||
TypePort,
|
||
fmt.Sprintf("192.168.1.1:%d", 80+i),
|
||
"OPEN",
|
||
nil,
|
||
)
|
||
if err := manager.SaveResult(result); err != nil {
|
||
t.Fatalf("第%d次SaveResult失败: %v", i, err)
|
||
}
|
||
}
|
||
|
||
manager.Close()
|
||
|
||
// 验证文件内容
|
||
content := readFileContent(t, config.OutputPath)
|
||
if len(content) == 0 {
|
||
t.Error("输出文件为空")
|
||
}
|
||
|
||
// 验证:包含类型前缀
|
||
if !strings.Contains(content, "# ===== 开放端口 =====") {
|
||
t.Errorf("输出缺少类型前缀")
|
||
}
|
||
|
||
// 验证:包含一些目标
|
||
if !strings.Contains(content, "192.168.1.1") {
|
||
t.Errorf("输出缺少目标")
|
||
}
|
||
|
||
t.Logf("✓ SaveResult测试通过")
|
||
}
|
||
|
||
// TestManager_SaveNilResult 测试保存nil结果
|
||
func TestManager_SaveNilResult(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
config := &ManagerConfig{
|
||
OutputPath: filepath.Join(dir, "test.txt"),
|
||
Format: FormatTXT,
|
||
}
|
||
|
||
manager, err := NewManager(config)
|
||
if err != nil {
|
||
t.Fatalf("NewManager失败: %v", err)
|
||
}
|
||
defer func() { _ = manager.Close() }()
|
||
|
||
// 保存nil结果应该返回错误
|
||
err = manager.SaveResult(nil)
|
||
if err == nil {
|
||
t.Error("保存nil结果应该返回错误")
|
||
}
|
||
|
||
if !strings.Contains(err.Error(), "cannot be nil") {
|
||
t.Errorf("错误信息不符合预期: %v", err)
|
||
}
|
||
|
||
t.Logf("✓ nil结果正确返回错误")
|
||
}
|
||
|
||
// TestManager_Flush 测试Flush
|
||
func TestManager_Flush(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
config := &ManagerConfig{
|
||
OutputPath: filepath.Join(dir, "test.txt"),
|
||
Format: FormatTXT,
|
||
}
|
||
|
||
manager, err := NewManager(config)
|
||
if err != nil {
|
||
t.Fatalf("NewManager失败: %v", err)
|
||
}
|
||
defer func() { _ = manager.Close() }()
|
||
|
||
// 写入数据
|
||
result := createTestResult(TypePort, "test", "test", nil)
|
||
_ = manager.SaveResult(result)
|
||
|
||
// Flush应该成功
|
||
if err := manager.Flush(); err != nil {
|
||
t.Errorf("Flush失败: %v", err)
|
||
}
|
||
|
||
t.Logf("✓ Flush测试通过")
|
||
}
|
||
|
||
// TestManager_Close 测试Close
|
||
func TestManager_Close(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
config := &ManagerConfig{
|
||
OutputPath: filepath.Join(dir, "test.txt"),
|
||
Format: FormatTXT,
|
||
}
|
||
|
||
manager, err := NewManager(config)
|
||
if err != nil {
|
||
t.Fatalf("NewManager失败: %v", err)
|
||
}
|
||
|
||
// 第一次Close应该成功
|
||
if closeErr := manager.Close(); closeErr != nil {
|
||
t.Errorf("第一次Close失败: %v", closeErr)
|
||
}
|
||
|
||
// 第二次Close应该也成功(幂等性)
|
||
if closeErr := manager.Close(); closeErr != nil {
|
||
t.Errorf("第二次Close失败: %v", closeErr)
|
||
}
|
||
|
||
// Close后Save应该返回错误
|
||
result := createTestResult(TypePort, "test", "test", nil)
|
||
err = manager.SaveResult(result)
|
||
if err == nil {
|
||
t.Error("Close后Save应该返回错误")
|
||
}
|
||
|
||
// Close后Flush应该返回错误
|
||
err = manager.Flush()
|
||
if err == nil {
|
||
t.Error("Close后Flush应该返回错误")
|
||
}
|
||
|
||
t.Logf("✓ Close测试通过")
|
||
}
|
||
|
||
// TestManager_ConcurrentSave 测试并发保存
|
||
func TestManager_ConcurrentSave(t *testing.T) {
|
||
dir := createTestDir(t)
|
||
|
||
config := &ManagerConfig{
|
||
OutputPath: filepath.Join(dir, "test.txt"),
|
||
Format: FormatTXT,
|
||
}
|
||
|
||
manager, err := NewManager(config)
|
||
if err != nil {
|
||
t.Fatalf("NewManager失败: %v", err)
|
||
}
|
||
defer func() { _ = manager.Close() }()
|
||
|
||
numGoroutines := 10
|
||
savesPerGoroutine := 10
|
||
|
||
var wg sync.WaitGroup
|
||
wg.Add(numGoroutines)
|
||
|
||
for i := 0; i < numGoroutines; i++ {
|
||
go func(id int) {
|
||
defer wg.Done()
|
||
|
||
for j := 0; j < savesPerGoroutine; j++ {
|
||
result := createTestResult(
|
||
TypePort,
|
||
fmt.Sprintf("192.168.%d.%d:80", id, j),
|
||
"OPEN",
|
||
nil,
|
||
)
|
||
_ = manager.SaveResult(result)
|
||
}
|
||
}(i)
|
||
}
|
||
|
||
wg.Wait()
|
||
manager.Close()
|
||
|
||
// 验证文件内容
|
||
content := readFileContent(t, config.OutputPath)
|
||
|
||
// 验证:文件非空
|
||
if content == "" {
|
||
t.Error("输出文件为空")
|
||
}
|
||
|
||
// 验证:包含类型前缀
|
||
if !strings.Contains(content, "# ===== 开放端口 =====") {
|
||
t.Errorf("输出缺少类型前缀")
|
||
}
|
||
|
||
// 验证:包含目标(实时模式每次写入都输出)
|
||
if !strings.Contains(content, "192.168.") {
|
||
t.Errorf("输出缺少目标")
|
||
}
|
||
|
||
lines := strings.Split(strings.TrimSpace(content), "\n")
|
||
t.Logf("✓ 并发保存测试通过(%d个goroutine,每个%d次,输出%d行)",
|
||
numGoroutines, savesPerGoroutine, len(lines))
|
||
}
|