admin/wxvl
1
0 Fork 0
mirror of https://github.com/gelusus/wxvl.git synced 2026-10-28 19:30:54 +00:00
Code Issues Packages Projects Releases Wiki Activity
1,914 Commits 1 Branch 0 Tags
59a0a7723fff85ff5b49d4cf8b022afef2395fd2
Commit Graph
13 Commits
Author SHA1 Message Date
Your Name ae2f047a3f 代码改进 (不含 workflow) 
run.py:
- 移除硬编码 doonsec session cookie (公开仓库凭据泄露, RSS 无需 cookie)
- 新增 canon_url() 规范化去重: 长链按 __biz/mid/idx/sn 判重,
  避免同一文章因 chksm/scene 跟踪参数不同被重复入库
- 新增 chainreactors 源: 从 archive 分支 dump frontmatter 提取短链
  (长链对机房IP有 wappoc 验证码, CI 只收短链)
- requests 全部加 30s 超时; 裸 except 改打印错误
- data.json 解析失败保留原文件并退出, 不再覆盖清空
- 修复 URL 提取正则字符类; 零抓取 exit 1 让 workflow 失败通知
- 删除 get_issue_url / issue 模式; 临时目录清理; 子进程 120s 超时
- rep_filename 同名冲突加序号防覆盖

README 更新数据源说明
新增: backfill.py (断档补录), crawl_todo.py (断点续爬)
 2026-08-15 21:01:06 +08:00
Your Name a8ae62b9ca 新增历史文章，修改匹配规则，删除误匹配文章 2025-04-16 17:06:28 +08:00
gelusus ef0cc91314 更改文章来源 2025-04-15 16:06:06 +08:00
Your Name 2f733cac51 改变目录结构，补充前段时间缺失的文章 2025-04-11 17:40:01 +08:00
Your Name ec32af5caf update 2025-04-11 15:45:53 +08:00
A b4c4647e3f Update run.py 2025-02-18 10:06:57 +08:00
A cf48a347ed Update run.py 2024-11-17 00:24:19 +08:00
A bc25b93490 Update run.py 2024-11-16 22:14:43 +08:00
test 9635df80d0 fix 2024-11-16 21:44:28 +08:00
test f54a618db3 fix 2024-11-16 21:42:29 +08:00
test 7f78e2adde add 2024-11-16 21:39:27 +08:00
test 8a4127d636 add 2024-11-16 21:10:07 +08:00
test b722c3f135 add 2024-11-16 20:27:20 +08:00