64 Commits

Author SHA1 Message Date
M09Ic
b120d703b8 重写了目录拼接的所有逻辑, 发现做到安全的目录拼接有些困难, 只能做到尽可能安全 2023-01-10 23:44:03 +08:00
M09Ic
f87acdf657 实装--crawl-depth 2023-01-10 01:09:00 +08:00
M09Ic
033f3acdd7 实装-c参数, 可以自定义client 2023-01-10 00:57:55 +08:00
M09Ic
b019324383 新增--read-all参数, 用来取消body max read限制 2023-01-09 21:47:06 +08:00
M09Ic
f24c7b3bc6 对爬虫进行大量优化, 包括优化性能, 去重, 优化目录拼接, 适配"./"相对目录
fuzzy会在开启debug时自动启用.
2023-01-09 21:33:05 +08:00
M09Ic
f8b84c733b 优化命令行参数, 当-w与-d都为空的时候自动添加"/"防止报错 2023-01-09 15:45:17 +08:00
M09Ic
4a1cb28bdd 新增--common, 探测web常见的通用文件.
优化--bak, bak现在还会带上常见的备份文件名了
2023-01-06 13:07:59 +08:00
M09Ic
010447c8f2 更加安全的目录拼接, 在不改变/数量的情况下, 实现安全且正确的拼接path 2023-01-06 01:28:09 +08:00
M09Ic
bb92c994cd 实现--bak, 自动生成字典爆破备份文件 2023-01-06 00:48:13 +08:00
M09Ic
26cc384de0 新增--file-bak参数, 开启有效结果的备份文件爆破, 可以使用-a同时开启三个 2023-01-05 23:26:14 +08:00
M09Ic
9750f819cd 新增--append-rule, 用来对valid的结果进行二次基于规则的爆破.
添加了规则表: filebak.txt
2023-01-05 22:42:07 +08:00
M09Ic
8014f06bf5 优化check-pool 2023-01-05 14:56:23 +08:00
M09Ic
f9837c4e29 优化help, 新增multi标记 2023-01-05 14:41:41 +08:00
M09Ic
c64467a588 -u 允许添加多个
调整stat文件名生成方式
2023-01-05 14:40:20 +08:00
M09Ic
e6815fedde 修复多处拼写错误 2023-01-04 13:52:12 +08:00
M09Ic
30a82a7657 初步实现-F
给--probe添加缩写-o
2023-01-04 12:06:13 +08:00
M09Ic
ffd387a28e 优化options的细节, 递归深度的选择 2023-01-04 00:15:34 +08:00
M09Ic
5142012ceb 实装--cookie --user-agent, --header参数 2023-01-03 18:43:12 +08:00
M09Ic
900dca32cb 新增--max-length参数, 允许手动调整最大读取的body 2023-01-03 17:30:14 +08:00
M09Ic
3d9e994c78 添加-a参数, 自动开启--crawl与--active 2023-01-03 17:20:07 +08:00
M09Ic
77d4e25c9e 初步实现主动指纹识别 2023-01-03 17:16:55 +08:00
M09Ic
9e9b0de039 初步实现简易爬虫 2023-01-03 17:09:32 +08:00
M09Ic
073cf2a095 给全局的输出添加配色, 可以使用--no-color或-q关闭 2022-12-15 00:19:06 +08:00
M09Ic
da1984f224 修复recu没有正确编译的bug.
更新words到最新版
2022-12-14 20:24:25 +08:00
M09Ic
14e4512efd 修复cmd输入url时stat文件名不正确的bug 2022-12-13 00:21:04 +08:00
M09Ic
0d81491d5a 大量优化, 实装断点续传, 添加ctrl+c的后续处理 2022-12-12 17:05:44 +08:00
M09Ic
75c33e1135 新增--dump与--dump-file, 用来保存全部数据 2022-12-12 00:13:47 +08:00
M09Ic
faf0812858 优化statistor, 现在是线程安全的 2022-12-11 04:21:42 +08:00
M09Ic
155d0d981b 调整默认check-period为200, 减少check发包.
优化check报错的输出
优化title输出, 转义换行符
2022-12-11 00:50:03 +08:00
M09Ic
af687701a7 初步实现了递归 2022-12-11 00:24:28 +08:00
M09Ic
8a71c1d35e 给help添加说明 2022-12-10 15:18:12 +08:00
M09Ic
10e55bdb9a 实装rule-base的filter rule 2022-12-09 19:30:12 +08:00
M09Ic
b94a4c3137 实装rulebase 字典生成器 2022-12-06 21:45:14 +08:00
M09Ic
f9c5a71258 实现断点续传 2022-12-02 19:59:15 +08:00
M09Ic
38e654913d 实装extractor
多处小优化
2022-12-02 15:21:17 +08:00
M09Ic
3e9bb1d5bf 适配新版words库 2022-11-30 01:31:15 +08:00
M09Ic
0233c3017b 自动判断协议升级 2022-11-29 20:50:00 +08:00
M09Ic
35fbb1a3c0 优化文件名的输出 2022-11-29 20:24:03 +08:00
M09Ic
d01736c46f -q 时将关闭所有非结果的输出 2022-11-29 15:39:16 +08:00
M09Ic
f0362b08b0 优化过滤规则,现在可以自定义white, black,fuzzy的状态码 2022-11-29 15:16:33 +08:00
M09Ic
779c98487c 实现文件写入 2022-11-29 15:08:10 +08:00
M09Ic
cc512829ec 新增statistor, 用作统计请求概览与断点续传 2022-11-21 23:56:27 +08:00
M09Ic
cd0ede7e1c 新增--filter与--match参数, 可以自定义过滤与匹配函数 2022-11-21 20:44:02 +08:00
M09Ic
04d8a5d0e7 修复空行的bug 2022-11-21 11:52:14 +08:00
M09Ic
e48390a4be 优化初始化信息输出 2022-11-21 11:45:48 +08:00
M09Ic
5dddf1933c 优化日志输出, 新增总的命令行进度条 2022-11-21 11:35:38 +08:00
M09Ic
be0fc35cab 实装--check-only参数, 实现类似httpx的批量请求的功能 2022-11-18 20:27:29 +08:00
M09Ic
a5966355ae 新增--white-status, 白名单状态码将跳过precompare 2022-11-17 17:09:37 +08:00
M09Ic
d95b0315ec 实装wafcheck, 目前只对状态码做简单的判断.
新增--black-status, 自定义黑名单状态码
2022-11-17 16:27:44 +08:00
M09Ic
32bf598c28 优化--force的逻辑, 开启--force时将关闭check 2022-11-17 05:40:02 +08:00