Files
fscan/webscan/lib/eval_test.go
T
ZacharyZcR 760c8ea502 v2.1.2 核心优化与多架构发布 (#561)
* feat: v2.1.0 核心重构与功能增强

## 架构重构
- 全局变量消除,迁移至 Config/State 对象
- SMB 插件融合(smb/smb2/smbghost/smbinfo)
- 服务探测重构,实现 Nmap 风格 fallback 机制
- 输出系统重构,TXT 实时刷盘 + 双写机制
- i18n 框架升级至 go-i18n

## 性能优化
- 正则表达式预编译
- 内存优化 map[string]struct{}
- 并发指纹匹配
- SOCKS5 连接复用
- 滑动窗口调度 + 自适应线程池

## 新功能
- Web 管理界面
- 多格式 POC 适配(xray/afrog)
- 增强指纹库(3139条)
- Favicon hash 指纹识别
- 插件选择性编译(Build Tags)
- fscan-lab 靶场环境
- 默认端口扩展(62→133)

## 构建系统
- 添加 no_local tag 支持排除本地插件
- 多版本构建:fscan/fscan-nolocal/fscan-web
- CI 添加 snapshot 模式支持仅测试构建

## Bug 修复
- 修复 120+ 个问题,包括 RDP panic、批量扫描漏报、
  JSON 输出格式、Redis 检测、Context 超时等

## 测试增强
- 单元测试覆盖率 74-100%
- 并发安全测试
- 集成测试(Web/端口/服务/SSH/ICMP)

* fix(ci): 移除 PR 对 Project 自动化的触发

* fix: Elasticsearch未授权检测优先于爆破 (#554)

* fix: 修复RDP爆破高误报率问题 (#555)

- 移除 screen.go 中错误的认证结果覆盖逻辑
- 启用 NLA 协议的 ErrorCode 字段检测
- 添加 PubKeyAuth 验证确保认证真正成功
- 修复 io.go 中错误被静默忽略的问题
- 修复 socket.go/io.go 中可能导致 panic 的代码
- 修复 screen.go 中文件句柄泄漏和 log.Panic

* fix: 修复-user/-pwd凭据参数不生效的问题

问题原因:
- Parse()解析凭据后更新globalConfig
- 但BuildConfigFromFlags()创建新Config时使用默认字典
- 导致解析的UserPassPairs等凭据信息被丢弃

修复内容:
1. initialize.go: 将Parse解析的凭据结果应用到新Config
2. credential.go: 单用户密码对时创建UserPassPairs
3. rdp.go: 单凭据测试时跳过指纹识别,减少连接次数

* feat: RDP使用NLA仅验证模式,避免挤掉已登录用户

- 添加ErrNLAAuthSuccess标志用于NLA验证成功信号
- tpkt层支持nlaAuthOnly模式,验证成功后不建立完整会话
- x224层正确传播NLA验证结果
- rdpCrack改用NlaAuth进行凭据验证

* fix: 修复进度条在Windows终端满屏重复输出的问题

- 添加终端宽度检测,动态调整进度条长度
- 使用空格覆盖清除旧内容,避免残留
- 简化进度条格式,确保不超过终端宽度

* feat: 优化日志颜色方案,区分漏洞和普通信息

- 新增 LogVuln 级别(红色),用于漏洞和重要发现
- 密码爆破成功、未授权访问、POC漏洞等改用红色显示
- 普通信息(扫描统计等)改为白色
- Web指纹保持绿色

* refactor: 精简化输出,移除冗余启动信息

- 移除showParseSummary开局配置输出
- 移除LogPluginInfo/LogPluginInfoWithPort插件信息输出
- 移除alive_scanner冗余统计输出
- 移除port_scan_start扫描开始提示
- 移除handleUDPPorts SNMP死代码
- 移除相关i18n条目

* chore: 版本号更新为2.1.1

* fix: 降级依赖版本以保持Go 1.20兼容性

* feat(ldap): 添加NTLM Hash认证支持 (#433)

* chore: 清理无用的 replace 指令

* fix(ping): 修复 TTL expired 导致主机误判为存活的问题

在 ExecCommandPing 中增加错误关键词检测,当 ping 输出包含
TTL expired、Destination unreachable 等错误信息时,不再将
目标主机标记为存活。

Fixes #454

* fix(proxy): 修复透明代理导致输出全端口的问题

在代理初始化时主动探测代理行为,通过连接 RFC 5737 保留的
测试地址来检测是否存在"全回显"问题。如果探测到代理不可靠,
则在端口扫描时跳过所有端口,避免误报。

- 新增 proxyReliable 标志位标记代理可靠性
- 新增 ProbeProxyBehavior 函数探测代理行为
- 端口扫描前检查代理可靠性并输出警告

Fixes #495

* refactor: 移动debug模块到common/debug子包

* fix(web): 修复-u模式下Web插件未执行的问题

* fix: 优化输出格式和颜色显示

- 网段统计格式改为 10.253.0.0/16 网段存活: 26
- WebTitle基础信息改为白色,指纹识别单独绿色输出
- 移除重复的端口数量输出

* fix: URL解析自动补全协议头

-uf 文件中 192.168.1.1:8080 自动转为 http://192.168.1.1:8080

* fix: 修复-u/-uf模式下URLs丢失导致0目标扫描的问题

Parse阶段将URLs设置到全局状态,但Initialize随后创建新状态
并覆盖了全局状态,导致URLs数据丢失。现在在创建新状态前
先保存并迁移Parse阶段设置的URLs和HostPorts数据。

* fix: 智能检测HTTP/HTTPS协议并优化URL显示

- 修复-u/-uf模式URLs丢失导致0目标扫描问题
- detectProtocol改为主动TLS握手检测,不依赖服务名
- WebTitle输出显示完整协议(http/https)
- 隐藏标准端口(80/443)使输出更简洁

* refactor: 精简parsers包,统一配置构建入口

- 删除冗余的中间层(XXXInput、XXXParser类)
- 新增 config_builder.go 统一配置构建
- parsers包从3000+行精简至~540行
- 保留核心函数:ParseIP、ParsePort、文件读取、凭据解析

* test: 扩展parsers单元测试覆盖边缘情况

- 新增内网简写解析测试(192/172/10)
- 新增完整IP范围和无效CIDR测试
- 新增Windows行尾(CRLF)处理测试
- 新增凭据和哈希文件解析测试
- 新增端口解析边缘情况测试
- 测试覆盖率达到94.2%

* refactor: 优化控制台输出格式

- 去掉时间戳,保留[*][+]前缀
- Web输出合并WebTitle和WebFinger为一行
- 有指纹显示绿色[+],无指纹显示白色[*]
- 格式: code:xxx len:xxx title:xxx server:xxx [指纹]
- 服务探测格式: [Product:xxx ||Version:xxx] Banner:(xxx)
- 字段对齐,输出更清爽

* feat: 添加凭据测试未发现弱密码的提示

- credential_tester.go: 失败时设置 Type=ResultTypeCredential
- scanner.go: 根据结果类型在 error 级别输出'未发现弱密码'提示
- 新增 i18n 翻译 brute_no_weak_pass

使用 -log all 或 -log error 可看到此提示

* refactor(logging): 重构日志级别为层级过滤设计

- LogLevel 从 string 改为 int 类型,支持层级比较
- 层级设计:Debug(0) < Base(1) < Info(2) < Success(3) < Vuln(4) < Error(5)
- 设置一个级别后,显示该级别及以上的日志
- Error 级别始终显示,不会被配置过滤掉
- 保留向后兼容别名(LevelAll, LevelInfoSuccess 等)
- 更新测试以匹配新的层级过滤行为

* style(logging): Error级别日志改为黄色显示

* style(findnet): NetInfo输出改为每行一个IP

* refactor(ms17010): 优化错误提示,明确指出SMBv1不支持等情况

* fix(credential): 修复凭据测试结果不一致的问题

问题原因:
1. 未知错误类型不重试,导致服务端限流时跳过正确密码
2. SSH 错误分类不够准确,某些临时错误未被识别

修复内容:
1. 未知错误改为可重试(可能是临时问题)
2. 增加 SSH 特有的网络错误识别(handshake failed, disconnect 等)

* fix(portfinger): 修复SMB2服务指纹识别和NetInfo输出问题

- 添加SMB2ProgNeg探针支持现代Windows的SMB2协议
- 修复Go regexp对高位字节的UTF-8兼容问题,使用Latin-1转换
- 修复探针失败后连接重建逻辑
- 修复vendor_product字段名不匹配问题
- 修复NetInfo多行输出被其他日志打断的问题

* fix(config): 从默认端口移除9100,避免触发打印机打印 (#517)

* feat(proxy): 增强代理端口扫描的深度验证机制

- 新增4阶段深度验证:Banner读取→探测发送→响应等待→最终判定
- 新增SOCKS5错误码和代理错误文本检测
- 优化ProbeProxyBehavior探测逻辑,发送数据验证连接可达性
- 解决透明代理/全回显代理导致的假阳性问题

* fix(proxy): 修复代理深度验证的若干问题

- detector.go: 修复 AutoConfigureProxy 覆盖探测结果的问题
  只有未探测过时才设置默认 proxyReliable 值

- port_scan.go: 改进深度验证机制
  - 使用带 Host header 的 HTTP GET 请求替代 OPTIONS
  - 延长响应等待超时至 2s 以适配慢速服务器
  - 正确重置连接 deadline 避免影响后续操作

* refactor: 统一 common 包文件命名风格

Flag.go -> flag.go

* refactor(proxy): 删除自定义 contains() 函数,改用标准库

- 用 strings.Contains() 替代手写的 contains()
- 删除过时的注释

* fix(parsers): 修复带横杠域名被误识别为IP范围的问题

如 111-555.sss.com 这类域名因包含 - 被错误解析为 IP 范围,
添加 looksLikeIPRange() 检查,只有 - 前是有效 IP 才走范围解析

* fix(proxy): 修复代理模式下服务识别错误和端口漏扫问题

- port_scan.go: 验证通过后重建干净连接,避免HTTP GET探测污染服务识别
- port_scan.go: 优化验证策略,用轻量CRLF探测替代HTTP GET,超时从2.2s降至0.6s
- manager.go: 修正ProbeProxyBehavior判断逻辑,超时应视为代理正常转发

* fix(pool): 移除线程池预分配,优化大规模扫描内存占用

WithPreAlloc(true) 会预先创建所有 worker goroutine,
在大规模扫描(如 25域名×65535端口)时可能导致内存问题

* refactor(logging): 统一日志前缀,删除废弃的 LogBase

- 删除 LogBase 函数,所有调用迁移到 LogInfo/LogError
- 新增 PrefixDebug ([.]) 前缀,所有日志级别现在都有前缀
- 修复日志输出缩进不一致的问题
- 删除未使用的 PrefixDefault 常量

* perf(icmp): 实现自适应等待算法优化存活检测性能

- 新增 waitAdaptive 函数,监控响应增量实现智能提前结束
- 算法保守原则:最小等待1s + 连续500ms无新响应才提前结束
- 添加100ms检查间隔避免CPU空转
- 保留原有最大等待时间(3s/6s)作为兜底
- 添加完整单元测试覆盖各种场景

优化效果:
- 全部响应:~100ms (原3s)
- 无响应:~1s (原3s)
- 部分响应后稳定:~1.5s (原3s)

* perf(scan): 实现启发式优化提升扫描体验

1. 端口优先级排序:高价值端口(80,443,22,3389等)优先扫描
   - 用户能更快看到有意义的结果
   - 不影响端口喷洒策略

2. TCP 补充探测:ICMP 响应率<10%时自动启用
   - 对未响应主机用 TCP 80/443/22/445 补充探测
   - 解决防火墙过滤 ICMP 导致漏检的问题

* refactor(grdp): 精简RDP库,删除认证检测不需要的代码

- 删除 VNC 协议支持 (protocol/rfb, client/rfb.go)
- 删除完整客户端框架 (client/)
- 删除 RemoteApp 等插件 (plugin/)
- 删除 RLE 图形解压 (core/rle.go)
- 删除绘图指令处理 (pdu/orders.go, pdu/gdi.go)
- 精简 screen.go,移除截图和完整会话功能
- 移除未使用的 RGB 转换函数

grdp 代码从 13,044 行精简至 7,581 行,削减 42%

* refactor(common): 删除死代码,优化代码风格

- 删除未使用的 joinStrings/joinInts 函数
- 删除未使用的 memStats 字段和 getMemoryInfo 方法
- 简化 parsePasswords 中的循环为 append(...) 形式

* refactor(services): 统一数据库插件的DBWrapper

4个数据库插件(MySQL、PostgreSQL、MSSQL、Oracle)都有相同的sql.DB包装代码,
合并为通用的SQLDBWrapper,减少重复。

* refactor(core,grdp): 删除未使用的死代码

- 移除 BaseScanStrategy.LogPluginInfoWithPort 方法(无调用者)
- 移除 mcs.go 中被注释的旧 connect 函数实现

* refactor: 删除 deadcode 检测出的未使用函数

- proxy/detector.go: 删除 IsSOCKS5Standard, IsProxyInitialized
- findnet.go: 删除 NetworkInfo.OneLine, TreeFormat 方法
- port_scan.go: 删除 estimateScanTime 函数
- web_scanner.go: 删除 GetFingerprints 函数
- 清理相关测试代码

* refactor: 删除更多未使用的死代码

- parse.go: 删除 RemoveDuplicate 函数及其测试
- parsers.go: 删除 excludeHosts, removeDuplicates 别名函数
- 更新测试使用真正的函数名

* fix(test): 修复 TestParseIP_InvalidIPRange 测试用例

- 删除不合理的测试用例(无效IP被当作普通主机名处理是设计行为)
- 修复测试逻辑,只在真正通过时输出"正确"

* fix(scan): 移除域名预解析,保留原始域名进行扫描

域名预解析会将域名转换为IP,导致虚拟主机场景下HTTP访问失败
(Host头变成IP而非域名,无法正确路由)

* fix(scan): 修复 -hf 参数无法单独使用的问题

* fix(proxy): 修复透明代理环境下 SOCKS5 代理全端口误报问题

问题:在透明代理(TUN模式)环境下使用 SOCKS5 代理扫描时,
会出现全端口开放的误报,因为代理可靠性检测被透明代理污染。

修复方案(参考 fscanx):
1. 将探针从 CRLF 改为 HTTP GET,更有效检测真实连接状态
2. 删除 "uncertain" 状态,无响应一律判定为端口关闭
3. 调整超时时间以适应代理链路延迟

Fixes #524

* feat(telnet): 新增 telnetd RCE 命令执行验证,修复未授权访问日志级别

* fix: 修复 i18n.Tr vet 报错、Unicode 测试用例,移除过期域名

- 移除 i18n.Tr 中错误的 fmt.Sprintf fallback,消除 go vet 误报
- 修复 match_engine_test Unicode 测试用例与 Latin-1 转换逻辑不匹配
- README 移除过期的 fscan.club 域名
- 添加 .gitattributes 统一换行符为 LF

* refactor: 统一控制台输出风格,使用统一的日志函数

手动合并 PR #558 的改动,适配重构后的代码路径

* fix(ci): 修复版本注入和CI触发配置

- goreleaser ldflags 指向正确的包路径 common.version/commit/date
- version 改为 var 支持 ldflags 注入,banner 显示 commit 和构建日期
- test-build 触发分支增加 dev-* 通配

* fix(ci): 修复 Windows 产物 .exe.exe 双后缀问题

* feat(ci): 扩展构建架构支持 MIPS/ARM/FreeBSD/Solaris
2026-04-25 17:39:16 +08:00

1117 lines
26 KiB
Go

package lib
import (
"fmt"
"io"
"net/http"
"net/url"
"strings"
"testing"
"github.com/google/cel-go/common/types"
)
// =============================================================================
// eval_encoding.go 测试 - 编码解码函数
// =============================================================================
func TestBase64Encoding(t *testing.T) {
tests := []struct {
name string
input string
expected string
}{
{"简单字符串", "hello", "aGVsbG8="},
{"特殊字符", "test@123", "dGVzdEAxMjM="},
{"中文", "测试", "5rWL6K+V"},
{"空字符串", "", ""},
}
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := `base64("` + tt.input + `")`
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
str, ok := result.(types.String)
if !ok {
t.Fatalf("返回值类型错误,期望 String,实际 %T", result)
}
if string(str) != tt.expected {
t.Errorf("base64() = %q, want %q", str, tt.expected)
}
})
}
}
func TestBase64Decoding(t *testing.T) {
tests := []struct {
name string
input string
expected string
}{
{"简单字符串", "aGVsbG8=", "hello"},
{"特殊字符", "dGVzdEAxMjM=", "test@123"},
{"空字符串", "", ""},
}
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := `base64Decode("` + tt.input + `")`
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
str, ok := result.(types.String)
if !ok {
t.Fatalf("返回值类型错误,期望 String,实际 %T", result)
}
if string(str) != tt.expected {
t.Errorf("base64Decode() = %q, want %q", str, tt.expected)
}
})
}
}
func TestURLEncoding(t *testing.T) {
tests := []struct {
name string
input string
expected string
}{
{"普通字符串", "hello world", "hello+world"},
{"特殊字符", "[email protected]", "test%40example.com"},
{"路径", "/api/v1/users", "%2Fapi%2Fv1%2Fusers"},
{"空字符串", "", ""},
}
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := `urlencode("` + tt.input + `")`
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
str, ok := result.(types.String)
if !ok {
t.Fatalf("返回值类型错误,期望 String,实际 %T", result)
}
if string(str) != tt.expected {
t.Errorf("urlencode() = %q, want %q", str, tt.expected)
}
})
}
}
func TestURLDecoding(t *testing.T) {
tests := []struct {
name string
input string
expected string
}{
{"空格编码", "hello+world", "hello world"},
{"特殊字符", "test%40example.com", "[email protected]"},
{"路径", "%2Fapi%2Fv1%2Fusers", "/api/v1/users"},
{"空字符串", "", ""},
}
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := `urldecode("` + tt.input + `")`
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
str, ok := result.(types.String)
if !ok {
t.Fatalf("返回值类型错误,期望 String,实际 %T", result)
}
if string(str) != tt.expected {
t.Errorf("urldecode() = %q, want %q", str, tt.expected)
}
})
}
}
// =============================================================================
// eval_crypto.go 测试 - 加密函数
// =============================================================================
func TestMD5Function(t *testing.T) {
tests := []struct {
name string
input string
expected string
}{
{"简单字符串", "hello", "5d41402abc4b2a76b9719d911017c592"},
{"数字", "123456", "e10adc3949ba59abbe56e057f20f883e"},
{"空字符串", "", "d41d8cd98f00b204e9800998ecf8427e"},
{"特殊字符", "admin@123", "e6e061838856bf47e1de730719fb2609"},
}
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := `md5("` + tt.input + `")`
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
str, ok := result.(types.String)
if !ok {
t.Fatalf("返回值类型错误,期望 String,实际 %T", result)
}
if string(str) != tt.expected {
t.Errorf("md5() = %q, want %q", str, tt.expected)
}
})
}
}
// =============================================================================
// eval_random.go 测试 - 随机函数
// =============================================================================
func TestRandomInt(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
expr string
min int64
max int64
}{
{"范围1-10", "randomInt(1, 10)", 1, 10},
{"范围100-200", "randomInt(100, 200)", 100, 200},
{"范围0-1", "randomInt(0, 1)", 0, 1},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
for i := 0; i < 10; i++ { // 运行10次确保随机性
result, err := Evaluate(env, tt.expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
num, ok := result.(types.Int)
if !ok {
t.Fatalf("返回值类型错误,期望 Int,实际 %T", result)
}
if int64(num) < tt.min || int64(num) >= tt.max {
t.Errorf("randomInt() = %d, 超出范围 [%d, %d)", num, tt.min, tt.max)
}
}
})
}
}
func TestRandomLowercase(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
length int
}{
{"长度5", 5},
{"长度10", 10},
{"长度1", 1},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := fmt.Sprintf("randomLowercase(%d)", tt.length)
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
str, ok := result.(types.String)
if !ok {
t.Fatalf("返回值类型错误,期望 String,实际 %T", result)
}
if len(str) != tt.length {
t.Errorf("randomLowercase() 长度 = %d, want %d", len(str), tt.length)
}
// 验证所有字符都是小写字母
for _, c := range str {
if c < 'a' || c > 'z' {
t.Errorf("randomLowercase() 包含非小写字母字符: %c", c)
break
}
}
})
}
}
func TestRandomUppercase(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
length int
}{
{"长度5", 5},
{"长度8", 8},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := fmt.Sprintf("randomUppercase(%d)", tt.length)
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
str, ok := result.(types.String)
if !ok {
t.Fatalf("返回值类型错误,期望 String,实际 %T", result)
}
if len(str) != tt.length {
t.Errorf("randomUppercase() 长度 = %d, want %d", len(str), tt.length)
}
// 验证所有字符都是大写字母
for _, c := range str {
if c < 'A' || c > 'Z' {
t.Errorf("randomUppercase() 包含非大写字母字符: %c", c)
break
}
}
})
}
}
func TestRandomString(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
length int
}{
{"长度10", 10},
{"长度20", 20},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := fmt.Sprintf("randomString(%d)", tt.length)
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
str, ok := result.(types.String)
if !ok {
t.Fatalf("返回值类型错误,期望 String,实际 %T", result)
}
if len(str) != tt.length {
t.Errorf("randomString() 长度 = %d, want %d", len(str), tt.length)
}
// 验证所有字符都是字母或数字
for _, c := range str {
if (c < 'a' || c > 'z') && (c < 'A' || c > 'Z') && (c < '0' || c > '9') {
t.Errorf("randomString() 包含非字母数字字符: %c", c)
break
}
}
})
}
}
// =============================================================================
// eval_string.go 测试 - 字符串函数
// =============================================================================
func TestIContains(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
str string
substr string
expected bool
}{
{"大小写不敏感匹配", "Hello World", "WORLD", true},
{"小写匹配", "hello world", "world", true},
{"不匹配", "hello", "bye", false},
{"空子串", "hello", "", true},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := `"` + tt.str + `".icontains("` + tt.substr + `")`
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
b, ok := result.(types.Bool)
if !ok {
t.Fatalf("返回值类型错误,期望 Bool,实际 %T", result)
}
if bool(b) != tt.expected {
t.Errorf("icontains() = %v, want %v", b, tt.expected)
}
})
}
}
func TestSubstr(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
str string
start int
length int
expected string
}{
{"正常提取", "hello world", 0, 5, "hello"},
{"中间提取", "hello world", 6, 5, "world"},
{"提取一个字符", "test", 1, 1, "e"},
{"中文字符", "你好世界", 0, 2, "你好"},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := fmt.Sprintf(`substr("%s", %d, %d)`, tt.str, tt.start, tt.length)
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
str, ok := result.(types.String)
if !ok {
t.Fatalf("返回值类型错误,期望 String,实际 %T", result)
}
if string(str) != tt.expected {
t.Errorf("substr() = %q, want %q", str, tt.expected)
}
})
}
}
func TestIStartsWith(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
str string
prefix string
expected bool
}{
{"大小写不敏感匹配", "Hello World", "HELLO", true},
{"小写匹配", "hello world", "hello", true},
{"不匹配", "hello", "world", false},
{"空前缀", "hello", "", true},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := `"` + tt.str + `".istartsWith("` + tt.prefix + `")`
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
b, ok := result.(types.Bool)
if !ok {
t.Fatalf("返回值类型错误,期望 Bool,实际 %T", result)
}
if bool(b) != tt.expected {
t.Errorf("istartsWith() = %v, want %v", b, tt.expected)
}
})
}
}
// =============================================================================
// 核心函数测试 - Evaluate
// =============================================================================
func TestEvaluate(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
expr string
params map[string]interface{}
expected interface{}
wantErr bool
}{
{
name: "空表达式返回true",
expr: "",
params: map[string]interface{}{},
expected: true,
wantErr: false,
},
{
name: "简单布尔表达式",
expr: "true && false",
params: map[string]interface{}{},
expected: false,
wantErr: false,
},
{
name: "数学计算",
expr: "1 + 2 * 3",
params: map[string]interface{}{},
expected: int64(7),
wantErr: false,
},
{
name: "字符串拼接",
expr: `"hello" + " " + "world"`,
params: map[string]interface{}{},
expected: "hello world",
wantErr: false,
},
{
name: "无效表达式",
expr: "invalid syntax +++",
params: map[string]interface{}{},
expected: nil,
wantErr: true,
},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
result, err := Evaluate(env, tt.expr, tt.params)
if (err != nil) != tt.wantErr {
t.Errorf("Evaluate() error = %v, wantErr %v", err, tt.wantErr)
return
}
if tt.wantErr {
return
}
// 类型转换和比较
switch expected := tt.expected.(type) {
case bool:
if b, ok := result.(types.Bool); ok {
if bool(b) != expected {
t.Errorf("Evaluate() = %v, want %v", b, expected)
}
} else {
t.Errorf("Evaluate() 返回类型错误,期望 Bool,实际 %T", result)
}
case int64:
if i, ok := result.(types.Int); ok {
if int64(i) != expected {
t.Errorf("Evaluate() = %v, want %v", i, expected)
}
} else {
t.Errorf("Evaluate() 返回类型错误,期望 Int,实际 %T", result)
}
case string:
if s, ok := result.(types.String); ok {
if string(s) != expected {
t.Errorf("Evaluate() = %v, want %v", s, expected)
}
} else {
t.Errorf("Evaluate() 返回类型错误,期望 String,实际 %T", result)
}
}
})
}
}
// =============================================================================
// 辅助函数测试
// =============================================================================
func TestURLTypeToString(t *testing.T) {
tests := []struct {
name string
url *UrlType
expected string
}{
{
name: "完整URL",
url: &UrlType{
Scheme: "https",
Host: "example.com:443",
Path: "/api/v1/users",
Query: "page=1&size=10",
Fragment: "section1",
},
expected: "https://example.com:443/api/v1/users?page=1&size=10#section1",
},
{
name: "无端口号",
url: &UrlType{
Scheme: "http",
Host: "example.com",
Path: "/test",
},
expected: "http://example.com/test",
},
{
name: "仅路径",
url: &UrlType{
Path: "/api/test",
},
expected: "/api/test",
},
{
name: "带查询参数无路径",
url: &UrlType{
Scheme: "https",
Host: "example.com",
Query: "q=test",
},
expected: "https://example.com?q=test",
},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
result := URLTypeToString(tt.url)
if result != tt.expected {
t.Errorf("URLTypeToString() = %q, want %q", result, tt.expected)
}
})
}
}
func TestRandomStrHelpers(t *testing.T) {
t.Run("randomLowercase生成小写字母", func(t *testing.T) {
for i := 0; i < 10; i++ {
result := randomLowercase(10)
if len(result) != 10 {
t.Errorf("randomLowercase(10) 长度 = %d, want 10", len(result))
}
for _, c := range result {
if c < 'a' || c > 'z' {
t.Errorf("randomLowercase() 包含非小写字母: %c", c)
break
}
}
}
})
t.Run("randomUppercase生成大写字母", func(t *testing.T) {
for i := 0; i < 10; i++ {
result := randomUppercase(10)
if len(result) != 10 {
t.Errorf("randomUppercase(10) 长度 = %d, want 10", len(result))
}
for _, c := range result {
if c < 'A' || c > 'Z' {
t.Errorf("randomUppercase() 包含非大写字母: %c", c)
break
}
}
}
})
t.Run("randomString生成字母数字", func(t *testing.T) {
for i := 0; i < 10; i++ {
result := randomString(15)
if len(result) != 15 {
t.Errorf("randomString(15) 长度 = %d, want 15", len(result))
}
for _, c := range result {
if (c < 'a' || c > 'z') && (c < 'A' || c > 'Z') && (c < '0' || c > '9') {
t.Errorf("randomString() 包含非字母数字字符: %c", c)
break
}
}
}
})
}
func TestCompileAndProgramOptions(t *testing.T) {
customLib := NewEnvOption()
t.Run("CompileOptions返回非空", func(t *testing.T) {
opts := customLib.CompileOptions()
if len(opts) == 0 {
t.Error("CompileOptions() 返回空切片")
}
})
t.Run("ProgramOptions返回空切片", func(t *testing.T) {
// ProgramOptions() 返回空切片是预期行为
// 函数实现通过 GetBaseProgramOptions() 在 Evaluate() 时注入
// 这避免了多次创建环境时重复注册函数导致的冲突
opts := customLib.ProgramOptions()
if len(opts) != 0 {
t.Error("ProgramOptions() 应返回空切片以避免重复注册函数")
}
})
t.Run("GetBaseProgramOptions返回非空", func(t *testing.T) {
// 函数实现通过 GetBaseProgramOptions() 提供
opts := GetBaseProgramOptions()
if len(opts) == 0 {
t.Error("GetBaseProgramOptions() 返回空切片")
}
})
}
func TestUpdateCompileOptions(t *testing.T) {
customLib := NewEnvOption()
tests := []struct {
name string
args StrMap
checkVar string
}{
{
name: "添加randomInt变量",
args: StrMap{
{Key: "myrand", Value: "randomInt(1, 100)"},
},
checkVar: "myrand",
},
{
name: "添加字符串变量",
args: StrMap{
{Key: "mystr", Value: "somevalue"},
},
checkVar: "mystr",
},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
initialLen := len(customLib.envOptions)
customLib.UpdateCompileOptions(tt.args)
if len(customLib.envOptions) <= initialLen {
t.Error("UpdateCompileOptions() 未添加新的环境选项")
}
})
}
}
func TestBcontainsBytes(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
haystack string
needle string
expected bool
}{
{"包含", "hello world", "world", true},
{"不包含", "hello", "world", false},
{"空needle", "hello", "", true},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
expr := `b"` + tt.haystack + `".bcontains(b"` + tt.needle + `")`
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
b, ok := result.(types.Bool)
if !ok {
t.Fatalf("返回值类型错误,期望 Bool,实际 %T", result)
}
if bool(b) != tt.expected {
t.Errorf("bcontains() = %v, want %v", b, tt.expected)
}
})
}
}
func TestBmatches(t *testing.T) {
customLib := NewEnvOption()
env, err := NewEnv(&customLib)
if err != nil {
t.Fatalf("创建 CEL 环境失败: %v", err)
}
tests := []struct {
name string
pattern string
text string
expected bool
}{
{"匹配数字", `\d+`, "abc123", true},
{"匹配邮箱", `\w+@\w+\.\w+`, "[email protected]", true},
{"不匹配", `\d+`, "abcdef", false},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
// 需要转义反斜杠
pattern := strings.ReplaceAll(tt.pattern, `\`, `\\`)
expr := `"` + pattern + `".bmatches(b"` + tt.text + `")`
result, err := Evaluate(env, expr, map[string]interface{}{})
if err != nil {
t.Fatalf("表达式评估失败: %v", err)
}
b, ok := result.(types.Bool)
if !ok {
t.Fatalf("返回值类型错误,期望 Bool,实际 %T", result)
}
if bool(b) != tt.expected {
t.Errorf("bmatches() = %v, want %v", b, tt.expected)
}
})
}
}
// =============================================================================
// HTTP 解析函数测试
// =============================================================================
func TestParseURL(t *testing.T) {
tests := []struct {
name string
input string
expected *UrlType
}{
{
name: "完整URL",
input: "https://example.com:443/api/v1/users?page=1&size=10#section1",
expected: &UrlType{
Scheme: "https",
Domain: "example.com",
Host: "example.com:443",
Port: "443",
Path: "/api/v1/users",
Query: "page=1&size=10",
Fragment: "section1",
},
},
{
name: "HTTP URL",
input: "http://example.com/test",
expected: &UrlType{
Scheme: "http",
Domain: "example.com",
Host: "example.com",
Port: "",
Path: "/test",
Query: "",
},
},
{
name: "仅域名",
input: "https://example.com",
expected: &UrlType{
Scheme: "https",
Domain: "example.com",
Host: "example.com",
Port: "",
Path: "",
},
},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
u, err := url.Parse(tt.input)
if err != nil {
t.Fatalf("URL 解析失败: %v", err)
}
result := ParseURL(u)
if result.Scheme != tt.expected.Scheme {
t.Errorf("Scheme = %q, want %q", result.Scheme, tt.expected.Scheme)
}
if result.Domain != tt.expected.Domain {
t.Errorf("Domain = %q, want %q", result.Domain, tt.expected.Domain)
}
if result.Host != tt.expected.Host {
t.Errorf("Host = %q, want %q", result.Host, tt.expected.Host)
}
if result.Port != tt.expected.Port {
t.Errorf("Port = %q, want %q", result.Port, tt.expected.Port)
}
if result.Path != tt.expected.Path {
t.Errorf("Path = %q, want %q", result.Path, tt.expected.Path)
}
if result.Query != tt.expected.Query {
t.Errorf("Query = %q, want %q", result.Query, tt.expected.Query)
}
})
}
}
func TestParseRequest(t *testing.T) {
tests := []struct {
name string
method string
url string
headers map[string]string
body string
wantMethod string
wantPath string
wantHeaders int
}{
{
name: "GET请求",
method: "GET",
url: "http://example.com/api/test",
headers: map[string]string{
"User-Agent": "test-agent",
"Accept": "application/json",
},
body: "",
wantMethod: "GET",
wantPath: "/api/test",
wantHeaders: 2,
},
{
name: "POST请求带Body",
method: "POST",
url: "http://example.com/api/login",
headers: map[string]string{
"Content-Type": "application/json",
},
body: `{"username":"admin","password":"123456"}`,
wantMethod: "POST",
wantPath: "/api/login",
wantHeaders: 1,
},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
u, _ := url.Parse(tt.url)
var bodyReader io.Reader
if tt.body != "" {
bodyReader = strings.NewReader(tt.body)
}
httpReq, err := http.NewRequest(tt.method, u.String(), bodyReader)
if err != nil {
t.Fatalf("创建 HTTP 请求失败: %v", err)
}
for k, v := range tt.headers {
httpReq.Header.Set(k, v)
}
req, err := ParseRequest(httpReq)
if err != nil {
t.Fatalf("ParseRequest() error = %v", err)
}
if req.Method != tt.wantMethod {
t.Errorf("Method = %q, want %q", req.Method, tt.wantMethod)
}
if req.URL.Path != tt.wantPath {
t.Errorf("Path = %q, want %q", req.URL.Path, tt.wantPath)
}
if len(req.Headers) < tt.wantHeaders {
t.Errorf("Headers count = %d, want at least %d", len(req.Headers), tt.wantHeaders)
}
if tt.body != "" && string(req.Body) != tt.body {
t.Errorf("Body = %q, want %q", req.Body, tt.body)
}
})
}
}
func TestGetRespBody(t *testing.T) {
tests := []struct {
name string
body string
compress bool
wantContent string
wantErr bool
}{
{
name: "普通响应体",
body: "Hello, World!",
compress: false,
wantContent: "Hello, World!",
wantErr: false,
},
{
name: "空响应体",
body: "",
compress: false,
wantContent: "",
wantErr: false,
},
{
name: "JSON响应",
body: `{"status":"success","data":{"id":1}}`,
compress: false,
wantContent: `{"status":"success","data":{"id":1}}`,
wantErr: false,
},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
// 创建模拟响应
resp := &http.Response{
Header: make(http.Header),
}
var bodyReader io.ReadCloser
if tt.compress {
resp.Header.Set("Content-Encoding", "gzip")
// 这里需要 gzip 压缩,暂时跳过
t.Skip("gzip 测试需要额外实现")
} else {
bodyReader = io.NopCloser(strings.NewReader(tt.body))
}
resp.Body = bodyReader
result, err := getRespBody(resp)
if (err != nil) != tt.wantErr {
t.Errorf("getRespBody() error = %v, wantErr %v", err, tt.wantErr)
return
}
if !tt.wantErr && string(result) != tt.wantContent {
t.Errorf("getRespBody() = %q, want %q", result, tt.wantContent)
}
})
}
}
func TestRandomStr(t *testing.T) {
tests := []struct {
name string
charset string
length int
checkRange func(c rune) bool
}{
{
name: "数字字符集",
charset: "0123456789",
length: 10,
checkRange: func(c rune) bool {
return c >= '0' && c <= '9'
},
},
{
name: "小写字母字符集",
charset: "abcdefghijklmnopqrstuvwxyz",
length: 15,
checkRange: func(c rune) bool {
return c >= 'a' && c <= 'z'
},
},
}
for _, tt := range tests {
t.Run(tt.name, func(t *testing.T) {
for i := 0; i < 5; i++ { // 运行多次确保稳定性
result := RandomStr(randSource, tt.charset, tt.length)
if len(result) != tt.length {
t.Errorf("RandomStr() 长度 = %d, want %d", len(result), tt.length)
}
for _, c := range result {
if !tt.checkRange(c) {
t.Errorf("RandomStr() 包含无效字符: %c", c)
break
}
}
}
})
}
}