Commit Graph
117 Commits
Author SHA1 Message Date
M09Ic b632d7ddb2 优化content-length输出, 现在超过max的结果也会正确的获取, 但添加了(exceed)标记 2023-01-04 11:31:31 +08:00
M09Ic d109f10a5d 优化输出, 有价值(200,30x)的index也会输出到文件中 2023-01-04 11:26:25 +08:00
M09Ic 0c397da718 统一crawl与extract的输出 2023-01-04 11:18:03 +08:00
M09Ic 7069ee6b9d 统一extract与crawl的输出 2023-01-04 11:07:18 +08:00
M09Ic d6d262e6d5 优化options的细节, 递归深度的选择 2023-01-04 00:15:34 +08:00
M09Ic 23d36def26 实装--cookie --user-agent, --header参数 2023-01-03 18:43:12 +08:00
M09Ic 8cabcc551a baseline添加source字段 2023-01-03 18:27:06 +08:00
M09Ic a7293af95a 调整爬虫的逻辑, 优化输出颜色 2023-01-03 18:22:13 +08:00
M09Ic ceada5df3c 新增--max-length参数, 允许手动调整最大读取的body v0.6.0 2023-01-03 17:30:14 +08:00
M09Ic ec6e3a4352 添加-a参数, 自动开启--crawl与--active 2023-01-03 17:20:07 +08:00
M09Ic c062309db5 初步实现主动指纹识别 2023-01-03 17:16:55 +08:00
M09Ic 8fa4da47cb 初步实现简易爬虫 2023-01-03 17:09:32 +08:00
M09Ic 7f0159f7c1 update README.md 2022-12-16 17:33:18 +08:00
M09Ic bc854c39ea 优化resume在因为错误退出时的逻辑 2022-12-16 11:56:27 +08:00
M09Ic bda3c45317 update README.md 2022-12-15 00:41:39 +08:00
M09Ic 0b67f08a25 给全局的输出添加配色, 可以使用--no-color或-q关闭 v0.5.1 2022-12-15 00:19:06 +08:00
M09Ic dbc7f3f84d update README.md 2022-12-14 23:15:38 +08:00
M09Ic 28597a5b9e update README.md 2022-12-14 23:09:19 +08:00
M09Ic ad6bb12903 update README.md 2022-12-14 20:24:37 +08:00
M09Ic a20376965d 修复recu没有正确编译的bug.
更新words到最新版
2022-12-14 20:24:25 +08:00
M09Ic 144e7c771c 优化性能, 使用启用了表达式才会生成对应的变量.
优化words的mask内存性能,完全使用生成器代替保存在内存中.
2022-12-14 14:20:45 +08:00
M09Ic f4cc4be9e6 修复cmd输入url时stat文件名不正确的bug 2022-12-13 00:21:04 +08:00
M09Ic f8325ed571 misc update 2022-12-13 00:19:51 +08:00
M09Ic b4232139b3 update README.md 2022-12-12 18:14:43 +08:00
M09Ic c454bc445f 展示删掉根据waf指纹判断waf, 因为可能会有大量误报 2022-12-12 18:01:14 +08:00
M09Ic c87605f41b update README.md 2022-12-12 17:28:55 +08:00
M09Ic f3ea1f681d 适配gogo2.10.1以及最新的templates v0.5.0 2022-12-12 17:26:07 +08:00
M09Ic 03acae4b99 update README.md 2022-12-12 17:07:07 +08:00
M09Ic eac33a7f0d 大量优化, 实装断点续传, 添加ctrl+c的后续处理 2022-12-12 17:05:44 +08:00
M09Ic f652112277 新增--dump与--dump-file, 用来保存全部数据 2022-12-12 00:13:47 +08:00
M09Ic 428cc1eb43 更加的严格waf判断的逻辑, 防止一些误报导致提前退出程序 2022-12-11 04:37:56 +08:00
M09Ic 2f9950c4e5 update README.md v0.4.1 2022-12-11 04:28:28 +08:00
M09Ic 12555eee14 优化statistor, 现在是线程安全的 2022-12-11 04:21:42 +08:00
M09Ic 962c1783be 修复一个严重的闭包的线程安全问题 2022-12-11 03:52:06 +08:00
M09Ic d41deacaae 修复hash计算时的传入值为body导致多处判断出错的bug 2022-12-11 01:21:05 +08:00
M09Ic 680e69e423 调整默认check-period为200, 减少check发包.
优化check报错的输出
优化title输出, 转义换行符
2022-12-11 00:50:03 +08:00
M09Ic 84619ecb12 初步实现了递归 2022-12-11 00:24:28 +08:00
M09Ic d51588d340 给help添加说明 2022-12-10 15:18:12 +08:00
M09Ic b655540f54 update README.md 2022-12-09 19:34:50 +08:00
M09Ic a0323d9f10 update README.md 2022-12-09 19:32:38 +08:00
M09Ic 45e49db738 add README.md 2022-12-09 19:30:42 +08:00
M09Ic c349c8aa3f 实装rule-base的filter rule 2022-12-09 19:30:12 +08:00
M09Ic 62c9a8e4d5 修复无效数据重复被送入结果管道的bug 2022-12-06 21:53:09 +08:00
M09Ic 07dca7c674 实装rulebase 字典生成器 2022-12-06 21:45:14 +08:00
M09Ic 341998b26b 实现断点续传 v0.4.0 2022-12-02 19:59:15 +08:00
M09Ic f84db3476f 实装耗时功能, 现在可以看到每个任务与每个请求的耗时 2022-12-02 18:29:26 +08:00
M09Ic 85bab6d05f 修复闭包的线程安全bug 2022-12-02 18:05:33 +08:00
M09Ic 4703be8280 实装extractor
多处小优化
2022-12-02 15:21:17 +08:00
M09Ic 92c9049e1b 给map添加lock 2022-12-01 11:49:40 +08:00
M09Ic 0f4529fede 给map 添加写锁 2022-12-01 11:40:59 +08:00