mirror of
https://github.com/shadow1ng/fscan.git
synced 2026-09-22 03:10:42 +08:00
* feat: v2.1.0 核心重构与功能增强
## 架构重构
- 全局变量消除,迁移至 Config/State 对象
- SMB 插件融合(smb/smb2/smbghost/smbinfo)
- 服务探测重构,实现 Nmap 风格 fallback 机制
- 输出系统重构,TXT 实时刷盘 + 双写机制
- i18n 框架升级至 go-i18n
## 性能优化
- 正则表达式预编译
- 内存优化 map[string]struct{}
- 并发指纹匹配
- SOCKS5 连接复用
- 滑动窗口调度 + 自适应线程池
## 新功能
- Web 管理界面
- 多格式 POC 适配(xray/afrog)
- 增强指纹库(3139条)
- Favicon hash 指纹识别
- 插件选择性编译(Build Tags)
- fscan-lab 靶场环境
- 默认端口扩展(62→133)
## 构建系统
- 添加 no_local tag 支持排除本地插件
- 多版本构建:fscan/fscan-nolocal/fscan-web
- CI 添加 snapshot 模式支持仅测试构建
## Bug 修复
- 修复 120+ 个问题,包括 RDP panic、批量扫描漏报、
JSON 输出格式、Redis 检测、Context 超时等
## 测试增强
- 单元测试覆盖率 74-100%
- 并发安全测试
- 集成测试(Web/端口/服务/SSH/ICMP)
* fix(ci): 移除 PR 对 Project 自动化的触发
* fix: Elasticsearch未授权检测优先于爆破 (#554)
* fix: 修复RDP爆破高误报率问题 (#555)
- 移除 screen.go 中错误的认证结果覆盖逻辑
- 启用 NLA 协议的 ErrorCode 字段检测
- 添加 PubKeyAuth 验证确保认证真正成功
- 修复 io.go 中错误被静默忽略的问题
- 修复 socket.go/io.go 中可能导致 panic 的代码
- 修复 screen.go 中文件句柄泄漏和 log.Panic
* fix: 修复-user/-pwd凭据参数不生效的问题
问题原因:
- Parse()解析凭据后更新globalConfig
- 但BuildConfigFromFlags()创建新Config时使用默认字典
- 导致解析的UserPassPairs等凭据信息被丢弃
修复内容:
1. initialize.go: 将Parse解析的凭据结果应用到新Config
2. credential.go: 单用户密码对时创建UserPassPairs
3. rdp.go: 单凭据测试时跳过指纹识别,减少连接次数
* feat: RDP使用NLA仅验证模式,避免挤掉已登录用户
- 添加ErrNLAAuthSuccess标志用于NLA验证成功信号
- tpkt层支持nlaAuthOnly模式,验证成功后不建立完整会话
- x224层正确传播NLA验证结果
- rdpCrack改用NlaAuth进行凭据验证
* fix: 修复进度条在Windows终端满屏重复输出的问题
- 添加终端宽度检测,动态调整进度条长度
- 使用空格覆盖清除旧内容,避免残留
- 简化进度条格式,确保不超过终端宽度
* feat: 优化日志颜色方案,区分漏洞和普通信息
- 新增 LogVuln 级别(红色),用于漏洞和重要发现
- 密码爆破成功、未授权访问、POC漏洞等改用红色显示
- 普通信息(扫描统计等)改为白色
- Web指纹保持绿色
* refactor: 精简化输出,移除冗余启动信息
- 移除showParseSummary开局配置输出
- 移除LogPluginInfo/LogPluginInfoWithPort插件信息输出
- 移除alive_scanner冗余统计输出
- 移除port_scan_start扫描开始提示
- 移除handleUDPPorts SNMP死代码
- 移除相关i18n条目
* chore: 版本号更新为2.1.1
* fix: 降级依赖版本以保持Go 1.20兼容性
* feat(ldap): 添加NTLM Hash认证支持 (#433)
* chore: 清理无用的 replace 指令
* fix(ping): 修复 TTL expired 导致主机误判为存活的问题
在 ExecCommandPing 中增加错误关键词检测,当 ping 输出包含
TTL expired、Destination unreachable 等错误信息时,不再将
目标主机标记为存活。
Fixes #454
* fix(proxy): 修复透明代理导致输出全端口的问题
在代理初始化时主动探测代理行为,通过连接 RFC 5737 保留的
测试地址来检测是否存在"全回显"问题。如果探测到代理不可靠,
则在端口扫描时跳过所有端口,避免误报。
- 新增 proxyReliable 标志位标记代理可靠性
- 新增 ProbeProxyBehavior 函数探测代理行为
- 端口扫描前检查代理可靠性并输出警告
Fixes #495
* refactor: 移动debug模块到common/debug子包
* fix(web): 修复-u模式下Web插件未执行的问题
* fix: 优化输出格式和颜色显示
- 网段统计格式改为 10.253.0.0/16 网段存活: 26
- WebTitle基础信息改为白色,指纹识别单独绿色输出
- 移除重复的端口数量输出
* fix: URL解析自动补全协议头
-uf 文件中 192.168.1.1:8080 自动转为 http://192.168.1.1:8080
* fix: 修复-u/-uf模式下URLs丢失导致0目标扫描的问题
Parse阶段将URLs设置到全局状态,但Initialize随后创建新状态
并覆盖了全局状态,导致URLs数据丢失。现在在创建新状态前
先保存并迁移Parse阶段设置的URLs和HostPorts数据。
* fix: 智能检测HTTP/HTTPS协议并优化URL显示
- 修复-u/-uf模式URLs丢失导致0目标扫描问题
- detectProtocol改为主动TLS握手检测,不依赖服务名
- WebTitle输出显示完整协议(http/https)
- 隐藏标准端口(80/443)使输出更简洁
* refactor: 精简parsers包,统一配置构建入口
- 删除冗余的中间层(XXXInput、XXXParser类)
- 新增 config_builder.go 统一配置构建
- parsers包从3000+行精简至~540行
- 保留核心函数:ParseIP、ParsePort、文件读取、凭据解析
* test: 扩展parsers单元测试覆盖边缘情况
- 新增内网简写解析测试(192/172/10)
- 新增完整IP范围和无效CIDR测试
- 新增Windows行尾(CRLF)处理测试
- 新增凭据和哈希文件解析测试
- 新增端口解析边缘情况测试
- 测试覆盖率达到94.2%
* refactor: 优化控制台输出格式
- 去掉时间戳,保留[*][+]前缀
- Web输出合并WebTitle和WebFinger为一行
- 有指纹显示绿色[+],无指纹显示白色[*]
- 格式: code:xxx len:xxx title:xxx server:xxx [指纹]
- 服务探测格式: [Product:xxx ||Version:xxx] Banner:(xxx)
- 字段对齐,输出更清爽
* feat: 添加凭据测试未发现弱密码的提示
- credential_tester.go: 失败时设置 Type=ResultTypeCredential
- scanner.go: 根据结果类型在 error 级别输出'未发现弱密码'提示
- 新增 i18n 翻译 brute_no_weak_pass
使用 -log all 或 -log error 可看到此提示
* refactor(logging): 重构日志级别为层级过滤设计
- LogLevel 从 string 改为 int 类型,支持层级比较
- 层级设计:Debug(0) < Base(1) < Info(2) < Success(3) < Vuln(4) < Error(5)
- 设置一个级别后,显示该级别及以上的日志
- Error 级别始终显示,不会被配置过滤掉
- 保留向后兼容别名(LevelAll, LevelInfoSuccess 等)
- 更新测试以匹配新的层级过滤行为
* style(logging): Error级别日志改为黄色显示
* style(findnet): NetInfo输出改为每行一个IP
* refactor(ms17010): 优化错误提示,明确指出SMBv1不支持等情况
* fix(credential): 修复凭据测试结果不一致的问题
问题原因:
1. 未知错误类型不重试,导致服务端限流时跳过正确密码
2. SSH 错误分类不够准确,某些临时错误未被识别
修复内容:
1. 未知错误改为可重试(可能是临时问题)
2. 增加 SSH 特有的网络错误识别(handshake failed, disconnect 等)
* fix(portfinger): 修复SMB2服务指纹识别和NetInfo输出问题
- 添加SMB2ProgNeg探针支持现代Windows的SMB2协议
- 修复Go regexp对高位字节的UTF-8兼容问题,使用Latin-1转换
- 修复探针失败后连接重建逻辑
- 修复vendor_product字段名不匹配问题
- 修复NetInfo多行输出被其他日志打断的问题
* fix(config): 从默认端口移除9100,避免触发打印机打印 (#517)
* feat(proxy): 增强代理端口扫描的深度验证机制
- 新增4阶段深度验证:Banner读取→探测发送→响应等待→最终判定
- 新增SOCKS5错误码和代理错误文本检测
- 优化ProbeProxyBehavior探测逻辑,发送数据验证连接可达性
- 解决透明代理/全回显代理导致的假阳性问题
* fix(proxy): 修复代理深度验证的若干问题
- detector.go: 修复 AutoConfigureProxy 覆盖探测结果的问题
只有未探测过时才设置默认 proxyReliable 值
- port_scan.go: 改进深度验证机制
- 使用带 Host header 的 HTTP GET 请求替代 OPTIONS
- 延长响应等待超时至 2s 以适配慢速服务器
- 正确重置连接 deadline 避免影响后续操作
* refactor: 统一 common 包文件命名风格
Flag.go -> flag.go
* refactor(proxy): 删除自定义 contains() 函数,改用标准库
- 用 strings.Contains() 替代手写的 contains()
- 删除过时的注释
* fix(parsers): 修复带横杠域名被误识别为IP范围的问题
如 111-555.sss.com 这类域名因包含 - 被错误解析为 IP 范围,
添加 looksLikeIPRange() 检查,只有 - 前是有效 IP 才走范围解析
* fix(proxy): 修复代理模式下服务识别错误和端口漏扫问题
- port_scan.go: 验证通过后重建干净连接,避免HTTP GET探测污染服务识别
- port_scan.go: 优化验证策略,用轻量CRLF探测替代HTTP GET,超时从2.2s降至0.6s
- manager.go: 修正ProbeProxyBehavior判断逻辑,超时应视为代理正常转发
* fix(pool): 移除线程池预分配,优化大规模扫描内存占用
WithPreAlloc(true) 会预先创建所有 worker goroutine,
在大规模扫描(如 25域名×65535端口)时可能导致内存问题
* refactor(logging): 统一日志前缀,删除废弃的 LogBase
- 删除 LogBase 函数,所有调用迁移到 LogInfo/LogError
- 新增 PrefixDebug ([.]) 前缀,所有日志级别现在都有前缀
- 修复日志输出缩进不一致的问题
- 删除未使用的 PrefixDefault 常量
* perf(icmp): 实现自适应等待算法优化存活检测性能
- 新增 waitAdaptive 函数,监控响应增量实现智能提前结束
- 算法保守原则:最小等待1s + 连续500ms无新响应才提前结束
- 添加100ms检查间隔避免CPU空转
- 保留原有最大等待时间(3s/6s)作为兜底
- 添加完整单元测试覆盖各种场景
优化效果:
- 全部响应:~100ms (原3s)
- 无响应:~1s (原3s)
- 部分响应后稳定:~1.5s (原3s)
* perf(scan): 实现启发式优化提升扫描体验
1. 端口优先级排序:高价值端口(80,443,22,3389等)优先扫描
- 用户能更快看到有意义的结果
- 不影响端口喷洒策略
2. TCP 补充探测:ICMP 响应率<10%时自动启用
- 对未响应主机用 TCP 80/443/22/445 补充探测
- 解决防火墙过滤 ICMP 导致漏检的问题
* refactor(grdp): 精简RDP库,删除认证检测不需要的代码
- 删除 VNC 协议支持 (protocol/rfb, client/rfb.go)
- 删除完整客户端框架 (client/)
- 删除 RemoteApp 等插件 (plugin/)
- 删除 RLE 图形解压 (core/rle.go)
- 删除绘图指令处理 (pdu/orders.go, pdu/gdi.go)
- 精简 screen.go,移除截图和完整会话功能
- 移除未使用的 RGB 转换函数
grdp 代码从 13,044 行精简至 7,581 行,削减 42%
* refactor(common): 删除死代码,优化代码风格
- 删除未使用的 joinStrings/joinInts 函数
- 删除未使用的 memStats 字段和 getMemoryInfo 方法
- 简化 parsePasswords 中的循环为 append(...) 形式
* refactor(services): 统一数据库插件的DBWrapper
4个数据库插件(MySQL、PostgreSQL、MSSQL、Oracle)都有相同的sql.DB包装代码,
合并为通用的SQLDBWrapper,减少重复。
* refactor(core,grdp): 删除未使用的死代码
- 移除 BaseScanStrategy.LogPluginInfoWithPort 方法(无调用者)
- 移除 mcs.go 中被注释的旧 connect 函数实现
* refactor: 删除 deadcode 检测出的未使用函数
- proxy/detector.go: 删除 IsSOCKS5Standard, IsProxyInitialized
- findnet.go: 删除 NetworkInfo.OneLine, TreeFormat 方法
- port_scan.go: 删除 estimateScanTime 函数
- web_scanner.go: 删除 GetFingerprints 函数
- 清理相关测试代码
* refactor: 删除更多未使用的死代码
- parse.go: 删除 RemoveDuplicate 函数及其测试
- parsers.go: 删除 excludeHosts, removeDuplicates 别名函数
- 更新测试使用真正的函数名
* fix(test): 修复 TestParseIP_InvalidIPRange 测试用例
- 删除不合理的测试用例(无效IP被当作普通主机名处理是设计行为)
- 修复测试逻辑,只在真正通过时输出"正确"
* fix(scan): 移除域名预解析,保留原始域名进行扫描
域名预解析会将域名转换为IP,导致虚拟主机场景下HTTP访问失败
(Host头变成IP而非域名,无法正确路由)
* fix(scan): 修复 -hf 参数无法单独使用的问题
* fix(proxy): 修复透明代理环境下 SOCKS5 代理全端口误报问题
问题:在透明代理(TUN模式)环境下使用 SOCKS5 代理扫描时,
会出现全端口开放的误报,因为代理可靠性检测被透明代理污染。
修复方案(参考 fscanx):
1. 将探针从 CRLF 改为 HTTP GET,更有效检测真实连接状态
2. 删除 "uncertain" 状态,无响应一律判定为端口关闭
3. 调整超时时间以适应代理链路延迟
Fixes #524
* feat(telnet): 新增 telnetd RCE 命令执行验证,修复未授权访问日志级别
* fix: 修复 i18n.Tr vet 报错、Unicode 测试用例,移除过期域名
- 移除 i18n.Tr 中错误的 fmt.Sprintf fallback,消除 go vet 误报
- 修复 match_engine_test Unicode 测试用例与 Latin-1 转换逻辑不匹配
- README 移除过期的 fscan.club 域名
- 添加 .gitattributes 统一换行符为 LF
* refactor: 统一控制台输出风格,使用统一的日志函数
手动合并 PR #558 的改动,适配重构后的代码路径
* fix(ci): 修复版本注入和CI触发配置
- goreleaser ldflags 指向正确的包路径 common.version/commit/date
- version 改为 var 支持 ldflags 注入,banner 显示 commit 和构建日期
- test-build 触发分支增加 dev-* 通配
* fix(ci): 修复 Windows 产物 .exe.exe 双后缀问题
* feat(ci): 扩展构建架构支持 MIPS/ARM/FreeBSD/Solaris
724 lines
20 KiB
Go
724 lines
20 KiB
Go
package core
|
||
|
||
import (
|
||
"fmt"
|
||
"testing"
|
||
)
|
||
|
||
/*
|
||
port_scan_test.go - EnhancedPortScan 核心逻辑测试
|
||
|
||
注意:EnhancedPortScan 是一个228行的"上帝函数",耦合了:
|
||
- 网络IO (TCP连接)
|
||
- 并发控制 (errgroup, semaphore)
|
||
- 全局状态 (common.*全局变量)
|
||
- 进度条管理
|
||
- 服务识别
|
||
- 结果保存
|
||
|
||
这种设计无法进行真正的单元测试。本测试文件:
|
||
1. 验证核心算法逻辑的正确性(通过独立函数模拟)
|
||
2. 测试关键计算逻辑(任务数计算、排除端口)
|
||
3. 不测试网络IO和并发控制(需要集成测试)
|
||
|
||
"这函数需要重构,不是测试。200行代码做了太多事情。
|
||
但既然现在无法重构,我们至少验证算法逻辑是对的。"
|
||
*/
|
||
|
||
// =============================================================================
|
||
// 核心算法逻辑测试(从EnhancedPortScan提取)
|
||
// =============================================================================
|
||
|
||
// calculateTotalTasks 计算总扫描任务数(从EnhancedPortScan:34-42行提取)
|
||
// 这是纯函数,可以独立测试
|
||
func calculateTotalTasks(hosts []string, portList []int, exclude map[int]struct{}) int {
|
||
totalTasks := 0
|
||
for range hosts {
|
||
for _, port := range portList {
|
||
if _, excluded := exclude[port]; !excluded {
|
||
totalTasks++
|
||
}
|
||
}
|
||
}
|
||
return totalTasks
|
||
}
|
||
|
||
// TestCalculateTotalTasks 测试总任务数计算逻辑
|
||
func TestCalculateTotalTasks(t *testing.T) {
|
||
tests := []struct {
|
||
name string
|
||
hosts []string
|
||
portList []int
|
||
exclude map[int]struct{}
|
||
expected int
|
||
}{
|
||
{
|
||
name: "单主机单端口-无排除",
|
||
hosts: []string{"192.168.1.1"},
|
||
portList: []int{80},
|
||
exclude: map[int]struct{}{},
|
||
expected: 1,
|
||
},
|
||
{
|
||
name: "单主机多端口-无排除",
|
||
hosts: []string{"192.168.1.1"},
|
||
portList: []int{80, 443, 8080},
|
||
exclude: map[int]struct{}{},
|
||
expected: 3,
|
||
},
|
||
{
|
||
name: "多主机单端口-无排除",
|
||
hosts: []string{"192.168.1.1", "192.168.1.2", "192.168.1.3"},
|
||
portList: []int{80},
|
||
exclude: map[int]struct{}{},
|
||
expected: 3,
|
||
},
|
||
{
|
||
name: "多主机多端口-无排除",
|
||
hosts: []string{"192.168.1.1", "192.168.1.2"},
|
||
portList: []int{80, 443, 8080},
|
||
exclude: map[int]struct{}{},
|
||
expected: 6, // 2 hosts * 3 ports
|
||
},
|
||
{
|
||
name: "单主机多端口-排除一个",
|
||
hosts: []string{"192.168.1.1"},
|
||
portList: []int{80, 443, 8080},
|
||
exclude: map[int]struct{}{443: {}},
|
||
expected: 2, // 80, 8080
|
||
},
|
||
{
|
||
name: "多主机多端口-排除多个",
|
||
hosts: []string{"192.168.1.1", "192.168.1.2"},
|
||
portList: []int{80, 443, 8080, 3306},
|
||
exclude: map[int]struct{}{443: {}, 3306: {}},
|
||
expected: 4, // 2 hosts * 2 ports (80, 8080)
|
||
},
|
||
{
|
||
name: "空主机列表",
|
||
hosts: []string{},
|
||
portList: []int{80, 443},
|
||
exclude: map[int]struct{}{},
|
||
expected: 0,
|
||
},
|
||
{
|
||
name: "空端口列表",
|
||
hosts: []string{"192.168.1.1"},
|
||
portList: []int{},
|
||
exclude: map[int]struct{}{},
|
||
expected: 0,
|
||
},
|
||
{
|
||
name: "所有端口都被排除",
|
||
hosts: []string{"192.168.1.1"},
|
||
portList: []int{80, 443},
|
||
exclude: map[int]struct{}{80: {}, 443: {}},
|
||
expected: 0,
|
||
},
|
||
{
|
||
name: "大规模扫描",
|
||
hosts: []string{"192.168.1.1", "192.168.1.2", "192.168.1.3", "192.168.1.4", "192.168.1.5"},
|
||
portList: []int{21, 22, 23, 80, 443, 3306, 3389, 8080, 8443, 9090},
|
||
exclude: map[int]struct{}{},
|
||
expected: 50, // 5 hosts * 10 ports
|
||
},
|
||
{
|
||
name: "大规模扫描-部分排除",
|
||
hosts: []string{"10.0.0.1", "10.0.0.2", "10.0.0.3"},
|
||
portList: []int{80, 443, 8080, 8443, 3000, 3001, 3002, 3003, 3004, 3005},
|
||
exclude: map[int]struct{}{8080: {}, 8443: {}},
|
||
expected: 24, // 3 hosts * 8 ports
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
result := calculateTotalTasks(tt.hosts, tt.portList, tt.exclude)
|
||
if result != tt.expected {
|
||
t.Errorf("calculateTotalTasks() = %d, 期望 %d", result, tt.expected)
|
||
}
|
||
})
|
||
}
|
||
}
|
||
|
||
// =============================================================================
|
||
// 地址格式化逻辑测试(从EnhancedPortScan:67行提取)
|
||
// =============================================================================
|
||
|
||
// formatAddress 格式化主机:端口地址(从EnhancedPortScan提取)
|
||
func formatAddress(host string, port int) string {
|
||
return fmt.Sprintf("%s:%d", host, port)
|
||
}
|
||
|
||
// TestFormatAddress 测试地址格式化
|
||
func TestFormatAddress(t *testing.T) {
|
||
tests := []struct {
|
||
name string
|
||
host string
|
||
port int
|
||
expected string
|
||
}{
|
||
{
|
||
name: "标准IPv4地址",
|
||
host: "192.168.1.1",
|
||
port: 80,
|
||
expected: "192.168.1.1:80",
|
||
},
|
||
{
|
||
name: "域名",
|
||
host: "example.com",
|
||
port: 443,
|
||
expected: "example.com:443",
|
||
},
|
||
{
|
||
name: "localhost",
|
||
host: "localhost",
|
||
port: 8080,
|
||
expected: "localhost:8080",
|
||
},
|
||
{
|
||
name: "高端口号",
|
||
host: "10.0.0.1",
|
||
port: 65535,
|
||
expected: "10.0.0.1:65535",
|
||
},
|
||
{
|
||
name: "低端口号",
|
||
host: "10.0.0.1",
|
||
port: 1,
|
||
expected: "10.0.0.1:1",
|
||
},
|
||
{
|
||
name: "常见HTTP端口",
|
||
host: "192.168.1.100",
|
||
port: 80,
|
||
expected: "192.168.1.100:80",
|
||
},
|
||
{
|
||
name: "常见HTTPS端口",
|
||
host: "192.168.1.100",
|
||
port: 443,
|
||
expected: "192.168.1.100:443",
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
result := formatAddress(tt.host, tt.port)
|
||
if result != tt.expected {
|
||
t.Errorf("formatAddress() = %q, 期望 %q", result, tt.expected)
|
||
}
|
||
})
|
||
}
|
||
}
|
||
|
||
// =============================================================================
|
||
// 排除端口逻辑测试(从EnhancedPortScan:28-32行提取)
|
||
// =============================================================================
|
||
|
||
// buildExcludeMap 构建排除端口映射(从EnhancedPortScan提取)
|
||
func buildExcludeMap(excludePorts []int) map[int]struct{} {
|
||
exclude := make(map[int]struct{}, len(excludePorts))
|
||
for _, p := range excludePorts {
|
||
exclude[p] = struct{}{}
|
||
}
|
||
return exclude
|
||
}
|
||
|
||
// TestBuildExcludeMap 测试排除端口映射构建
|
||
func TestBuildExcludeMap(t *testing.T) {
|
||
tests := []struct {
|
||
name string
|
||
excludePorts []int
|
||
testPort int
|
||
shouldExclude bool
|
||
}{
|
||
{
|
||
name: "空排除列表",
|
||
excludePorts: []int{},
|
||
testPort: 80,
|
||
shouldExclude: false,
|
||
},
|
||
{
|
||
name: "单个排除端口-匹配",
|
||
excludePorts: []int{443},
|
||
testPort: 443,
|
||
shouldExclude: true,
|
||
},
|
||
{
|
||
name: "单个排除端口-不匹配",
|
||
excludePorts: []int{443},
|
||
testPort: 80,
|
||
shouldExclude: false,
|
||
},
|
||
{
|
||
name: "多个排除端口-匹配第一个",
|
||
excludePorts: []int{80, 443, 8080},
|
||
testPort: 80,
|
||
shouldExclude: true,
|
||
},
|
||
{
|
||
name: "多个排除端口-匹配中间",
|
||
excludePorts: []int{80, 443, 8080},
|
||
testPort: 443,
|
||
shouldExclude: true,
|
||
},
|
||
{
|
||
name: "多个排除端口-匹配最后",
|
||
excludePorts: []int{80, 443, 8080},
|
||
testPort: 8080,
|
||
shouldExclude: true,
|
||
},
|
||
{
|
||
name: "多个排除端口-不匹配",
|
||
excludePorts: []int{80, 443, 8080},
|
||
testPort: 3306,
|
||
shouldExclude: false,
|
||
},
|
||
{
|
||
name: "大量排除端口",
|
||
excludePorts: []int{21, 22, 23, 25, 53, 110, 143, 445, 3389},
|
||
testPort: 3389,
|
||
shouldExclude: true,
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
excludeMap := buildExcludeMap(tt.excludePorts)
|
||
|
||
// 验证映射大小
|
||
if len(excludeMap) != len(tt.excludePorts) {
|
||
t.Errorf("excludeMap长度 = %d, 期望 %d", len(excludeMap), len(tt.excludePorts))
|
||
}
|
||
|
||
// 验证端口是否被正确排除
|
||
_, excluded := excludeMap[tt.testPort]
|
||
if excluded != tt.shouldExclude {
|
||
t.Errorf("端口 %d 排除状态 = %v, 期望 %v", tt.testPort, excluded, tt.shouldExclude)
|
||
}
|
||
})
|
||
}
|
||
}
|
||
|
||
// TestBuildExcludeMap_DuplicatePorts 测试重复端口处理
|
||
func TestBuildExcludeMap_DuplicatePorts(t *testing.T) {
|
||
excludePorts := []int{80, 443, 80, 443, 80}
|
||
excludeMap := buildExcludeMap(excludePorts)
|
||
|
||
// 重复端口应该被去重(map自动去重)
|
||
if len(excludeMap) != 2 {
|
||
t.Errorf("excludeMap应自动去重, 期望长度2, 实际 %d", len(excludeMap))
|
||
}
|
||
|
||
// 验证两个端口都存在
|
||
if _, ok := excludeMap[80]; !ok {
|
||
t.Error("端口80应在排除列表中")
|
||
}
|
||
if _, ok := excludeMap[443]; !ok {
|
||
t.Error("端口443应在排除列表中")
|
||
}
|
||
}
|
||
|
||
// =============================================================================
|
||
// 集成逻辑测试(任务数计算 + 排除端口)
|
||
// =============================================================================
|
||
|
||
// TestIntegratedTaskCalculation 测试任务计算与排除端口的集成
|
||
func TestIntegratedTaskCalculation(t *testing.T) {
|
||
tests := []struct {
|
||
name string
|
||
hosts []string
|
||
portList []int
|
||
excludePorts []int
|
||
expected int
|
||
}{
|
||
{
|
||
name: "无排除-小规模",
|
||
hosts: []string{"192.168.1.1", "192.168.1.2"},
|
||
portList: []int{80, 443, 8080},
|
||
excludePorts: []int{},
|
||
expected: 6, // 2*3
|
||
},
|
||
{
|
||
name: "有排除-小规模",
|
||
hosts: []string{"192.168.1.1", "192.168.1.2"},
|
||
portList: []int{80, 443, 8080},
|
||
excludePorts: []int{443},
|
||
expected: 4, // 2*2
|
||
},
|
||
{
|
||
name: "大规模C段扫描",
|
||
hosts: make([]string, 254), // 模拟254个主机
|
||
portList: []int{80, 443, 22, 3389, 3306},
|
||
excludePorts: []int{22}, // 排除SSH
|
||
expected: 1016, // 254 * 4
|
||
},
|
||
{
|
||
name: "端口全排除",
|
||
hosts: []string{"192.168.1.1"},
|
||
portList: []int{80, 443},
|
||
excludePorts: []int{80, 443},
|
||
expected: 0,
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
// 填充大规模测试的hosts
|
||
if len(tt.hosts) == 254 && tt.hosts[0] == "" {
|
||
for i := range tt.hosts {
|
||
tt.hosts[i] = fmt.Sprintf("192.168.1.%d", i+1)
|
||
}
|
||
}
|
||
|
||
excludeMap := buildExcludeMap(tt.excludePorts)
|
||
result := calculateTotalTasks(tt.hosts, tt.portList, excludeMap)
|
||
|
||
if result != tt.expected {
|
||
t.Errorf("集成测试失败: calculateTotalTasks() = %d, 期望 %d", result, tt.expected)
|
||
}
|
||
})
|
||
}
|
||
}
|
||
|
||
// =============================================================================
|
||
// 边界情况和错误处理测试
|
||
// =============================================================================
|
||
|
||
// TestCalculateTotalTasks_EdgeCases 测试边界情况
|
||
func TestCalculateTotalTasks_EdgeCases(t *testing.T) {
|
||
t.Run("nil主机列表", func(t *testing.T) {
|
||
result := calculateTotalTasks(nil, []int{80}, map[int]struct{}{})
|
||
if result != 0 {
|
||
t.Errorf("nil主机列表应返回0, 实际 %d", result)
|
||
}
|
||
})
|
||
|
||
t.Run("nil端口列表", func(t *testing.T) {
|
||
result := calculateTotalTasks([]string{"192.168.1.1"}, nil, map[int]struct{}{})
|
||
if result != 0 {
|
||
t.Errorf("nil端口列表应返回0, 实际 %d", result)
|
||
}
|
||
})
|
||
|
||
t.Run("nil排除映射", func(t *testing.T) {
|
||
result := calculateTotalTasks([]string{"192.168.1.1"}, []int{80}, nil)
|
||
if result != 1 {
|
||
t.Errorf("nil排除映射应视为无排除, 期望1, 实际 %d", result)
|
||
}
|
||
})
|
||
|
||
t.Run("极大端口号", func(t *testing.T) {
|
||
excludeMap := buildExcludeMap([]int{65535})
|
||
if _, ok := excludeMap[65535]; !ok {
|
||
t.Error("应支持最大端口号65535")
|
||
}
|
||
})
|
||
|
||
t.Run("端口号0", func(t *testing.T) {
|
||
excludeMap := buildExcludeMap([]int{0})
|
||
if _, ok := excludeMap[0]; !ok {
|
||
t.Error("应支持端口号0")
|
||
}
|
||
})
|
||
}
|
||
|
||
// =============================================================================
|
||
// 性能基准测试
|
||
// =============================================================================
|
||
|
||
// BenchmarkCalculateTotalTasks 基准测试任务计算性能
|
||
func BenchmarkCalculateTotalTasks(b *testing.B) {
|
||
// 模拟C段扫描: 254个主机 * 10个端口
|
||
hosts := make([]string, 254)
|
||
for i := range hosts {
|
||
hosts[i] = fmt.Sprintf("192.168.1.%d", i+1)
|
||
}
|
||
portList := []int{21, 22, 80, 443, 3306, 3389, 8080, 8443, 9090, 9200}
|
||
exclude := map[int]struct{}{}
|
||
|
||
b.ResetTimer()
|
||
for i := 0; i < b.N; i++ {
|
||
calculateTotalTasks(hosts, portList, exclude)
|
||
}
|
||
}
|
||
|
||
// BenchmarkBuildExcludeMap 基准测试排除映射构建性能
|
||
func BenchmarkBuildExcludeMap(b *testing.B) {
|
||
excludePorts := []int{21, 22, 23, 25, 53, 110, 143, 445, 3389, 1433}
|
||
|
||
b.ResetTimer()
|
||
for i := 0; i < b.N; i++ {
|
||
buildExcludeMap(excludePorts)
|
||
}
|
||
}
|
||
|
||
// =============================================================================
|
||
// 重构后函数的单元测试
|
||
// =============================================================================
|
||
|
||
// TestBuildServiceLogMessage 测试服务日志消息构建
|
||
// 新格式: "addr service version/banner"
|
||
func TestBuildServiceLogMessage(t *testing.T) {
|
||
tests := []struct {
|
||
name string
|
||
addr string
|
||
serviceInfo *ServiceInfo
|
||
isWeb bool
|
||
wantContain []string // 期望包含的字符串片段
|
||
}{
|
||
{
|
||
name: "基础HTTP服务",
|
||
addr: "192.168.1.1:80",
|
||
serviceInfo: &ServiceInfo{
|
||
Name: "http",
|
||
Version: "1.1",
|
||
Banner: "",
|
||
Extras: map[string]string{},
|
||
},
|
||
isWeb: true,
|
||
wantContain: []string{"192.168.1.1:80", "http", "1.1"},
|
||
},
|
||
{
|
||
name: "带Banner的SSH服务",
|
||
addr: "10.0.0.1:22",
|
||
serviceInfo: &ServiceInfo{
|
||
Name: "ssh",
|
||
Version: "OpenSSH_8.0",
|
||
Banner: "SSH-2.0-OpenSSH_8.0",
|
||
Extras: map[string]string{},
|
||
},
|
||
isWeb: false,
|
||
wantContain: []string{"10.0.0.1:22", "ssh", "SSH-2.0-OpenSSH_8.0"}, // Banner优先于Version
|
||
},
|
||
{
|
||
name: "带扩展信息的服务",
|
||
addr: "172.16.0.1:3306",
|
||
serviceInfo: &ServiceInfo{
|
||
Name: "mysql",
|
||
Version: "5.7.30",
|
||
Banner: "",
|
||
Extras: map[string]string{
|
||
"vendor_product": "MySQL Community Server",
|
||
"os": "Linux",
|
||
"info": "utf8_general_ci",
|
||
},
|
||
},
|
||
isWeb: false,
|
||
wantContain: []string{"172.16.0.1:3306", "mysql", "5.7.30"}, // 简化格式不包含Extras
|
||
},
|
||
{
|
||
name: "未知服务",
|
||
addr: "192.168.1.1:8888",
|
||
serviceInfo: &ServiceInfo{
|
||
Name: "unknown",
|
||
Version: "",
|
||
Banner: "",
|
||
Extras: map[string]string{},
|
||
},
|
||
isWeb: false,
|
||
wantContain: []string{"192.168.1.1:8888"}, // unknown服务不显示名称
|
||
},
|
||
{
|
||
name: "过长Banner使用Version",
|
||
addr: "10.0.0.1:21",
|
||
serviceInfo: &ServiceInfo{
|
||
Name: "ftp",
|
||
Version: "2.0",
|
||
Banner: string(make([]byte, 200)), // 超过100字符的banner
|
||
Extras: map[string]string{},
|
||
},
|
||
isWeb: false,
|
||
wantContain: []string{"10.0.0.1:21", "ftp", "2.0"}, // Banner超长则用Version
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
result := buildServiceLogMessage(tt.addr, tt.serviceInfo, tt.isWeb)
|
||
|
||
// 验证所有期望的字符串片段都存在
|
||
for _, want := range tt.wantContain {
|
||
if !contains(result, want) {
|
||
t.Errorf("buildServiceLogMessage() 结果缺少期望内容\n期望包含: %q\n实际结果: %q", want, result)
|
||
}
|
||
}
|
||
})
|
||
}
|
||
}
|
||
|
||
// contains 检查字符串是否包含子串
|
||
func contains(s, substr string) bool {
|
||
return len(s) >= len(substr) && (s == substr || len(substr) == 0 ||
|
||
(len(s) > 0 && len(substr) > 0 && indexOf(s, substr) >= 0))
|
||
}
|
||
|
||
// indexOf 查找子串位置
|
||
func indexOf(s, substr string) int {
|
||
for i := 0; i <= len(s)-len(substr); i++ {
|
||
if s[i:i+len(substr)] == substr {
|
||
return i
|
||
}
|
||
}
|
||
return -1
|
||
}
|
||
|
||
// =============================================================================
|
||
// 资源耗尽错误检测测试
|
||
// =============================================================================
|
||
|
||
/*
|
||
资源耗尽错误检测 - isResourceExhaustedError 函数测试
|
||
|
||
测试价值:资源耗尽检测是生产环境的关键逻辑,错误分类影响重试策略
|
||
|
||
"这是真正的业务逻辑。错误分类错了,扫描就会失败或死循环。
|
||
这种函数必须测试,而且要测真实的错误场景。"
|
||
*/
|
||
|
||
// TestIsResourceExhaustedError_ActualErrors 测试真实的资源耗尽错误
|
||
func TestIsResourceExhaustedError_ActualErrors(t *testing.T) {
|
||
tests := []struct {
|
||
name string
|
||
err error
|
||
expected bool
|
||
}{
|
||
{
|
||
name: "文件描述符耗尽-Linux",
|
||
err: fmt.Errorf("socket: too many open files"),
|
||
expected: true,
|
||
},
|
||
{
|
||
name: "文件描述符耗尽-直接错误",
|
||
err: fmt.Errorf("too many open files"),
|
||
expected: true,
|
||
},
|
||
{
|
||
name: "缓冲区耗尽",
|
||
err: fmt.Errorf("write: no buffer space available"),
|
||
expected: true,
|
||
},
|
||
{
|
||
name: "本地端口耗尽",
|
||
err: fmt.Errorf("dial tcp: cannot assign requested address"),
|
||
expected: true,
|
||
},
|
||
{
|
||
name: "连接重置-高并发",
|
||
err: fmt.Errorf("read tcp 192.168.1.1:1234->10.0.0.1:80: connection reset by peer"),
|
||
expected: true,
|
||
},
|
||
{
|
||
name: "自定义发包限制",
|
||
err: fmt.Errorf("发包受限"),
|
||
expected: true,
|
||
},
|
||
{
|
||
name: "nil错误",
|
||
err: nil,
|
||
expected: false,
|
||
},
|
||
{
|
||
name: "普通网络错误-超时",
|
||
err: fmt.Errorf("dial tcp: i/o timeout"),
|
||
expected: false,
|
||
},
|
||
{
|
||
name: "普通网络错误-拒绝连接",
|
||
err: fmt.Errorf("connection refused"),
|
||
expected: false,
|
||
},
|
||
{
|
||
name: "认证错误",
|
||
err: fmt.Errorf("authentication failed"),
|
||
expected: false,
|
||
},
|
||
{
|
||
name: "空字符串错误",
|
||
err: fmt.Errorf(""),
|
||
expected: false,
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
result := isResourceExhaustedError(tt.err)
|
||
if result != tt.expected {
|
||
t.Errorf("isResourceExhaustedError() = %v, want %v (error: %v)",
|
||
result, tt.expected, tt.err)
|
||
}
|
||
})
|
||
}
|
||
}
|
||
|
||
// TestIsResourceExhaustedError_EdgeCases 测试边界情况
|
||
func TestIsResourceExhaustedError_EdgeCases(t *testing.T) {
|
||
tests := []struct {
|
||
name string
|
||
err error
|
||
expected bool
|
||
}{
|
||
{
|
||
name: "大小写混合",
|
||
err: fmt.Errorf("Too Many Open Files"),
|
||
expected: false, // 当前实现区分大小写
|
||
},
|
||
{
|
||
name: "错误信息包含但不完全匹配",
|
||
err: fmt.Errorf("some error with no buffer space available suffix"),
|
||
expected: true, // strings.Contains会匹配完整短语
|
||
},
|
||
{
|
||
name: "多个错误特征-只需匹配一个",
|
||
err: fmt.Errorf("too many open files and no buffer space available"),
|
||
expected: true,
|
||
},
|
||
}
|
||
|
||
for _, tt := range tests {
|
||
t.Run(tt.name, func(t *testing.T) {
|
||
result := isResourceExhaustedError(tt.err)
|
||
if result != tt.expected {
|
||
t.Errorf("isResourceExhaustedError() = %v, want %v (error: %v)",
|
||
result, tt.expected, tt.err)
|
||
}
|
||
})
|
||
}
|
||
}
|
||
|
||
// TestIsResourceExhaustedError_ProductionScenarios 测试生产环境真实场景
|
||
func TestIsResourceExhaustedError_ProductionScenarios(t *testing.T) {
|
||
// 场景1:ulimit设置太低
|
||
t.Run("ulimit限制触发", func(t *testing.T) {
|
||
err := fmt.Errorf("dial tcp 10.0.0.1:22: socket: too many open files")
|
||
if !isResourceExhaustedError(err) {
|
||
t.Error("应该识别出ulimit限制错误")
|
||
}
|
||
})
|
||
|
||
// 场景2:Windows端口耗尽
|
||
t.Run("Windows端口耗尽", func(t *testing.T) {
|
||
err := fmt.Errorf("dial tcp :0: bind: cannot assign requested address")
|
||
if !isResourceExhaustedError(err) {
|
||
t.Error("应该识别出端口耗尽错误")
|
||
}
|
||
})
|
||
|
||
// 场景3:并发扫描导致的连接重置
|
||
t.Run("高并发连接重置", func(t *testing.T) {
|
||
err := fmt.Errorf("read tcp: connection reset by peer")
|
||
if !isResourceExhaustedError(err) {
|
||
t.Error("应该识别出高并发导致的连接重置")
|
||
}
|
||
})
|
||
|
||
// 场景4:正常的认证失败不应被识别为资源耗尽
|
||
t.Run("认证失败-不是资源问题", func(t *testing.T) {
|
||
err := fmt.Errorf("ssh: handshake failed: ssh: unable to authenticate")
|
||
if isResourceExhaustedError(err) {
|
||
t.Error("认证失败不应被识别为资源耗尽")
|
||
}
|
||
})
|
||
}
|