This website requires JavaScript.
Explore
Help
Sign In
toom1996
/
spider
Watch
1
Star
0
Fork
0
You've already forked spider
Code
Issues
Pull Requests
Actions
Packages
Projects
Releases
Wiki
Activity
Files
fb9b6c4f6e7fbb59d28a1d4e7de03c07e25ea540
spider
/
internal
History
toom1996
fb9b6c4f6e
feat: 抓取期间每 60 秒打一次进度心跳
...
单场秀几百张图要抓几十分钟,期间 done 不变。 后台按「progress_at 超过 10 分钟没变」判卡死,会把正常但慢的抓取误报成卡死。 心跳只刷新时间戳,不改进度数字。
2026-10-25 20:50:05 +08:00
..
config
feat: 媒体机直传 + 向量回填
2026-10-25 00:27:46 +08:00
embed
feat: 媒体机直传 + 向量回填
2026-10-25 00:27:46 +08:00
fetch
update
2026-09-20 00:44:47 +08:00
ingest
feat: 上报抓取进度(后台显示 3/25 场 · 正在抓什么)
2026-10-25 20:33:45 +08:00
media
fix: 抓取前预检已入库的秀,避免重复下载(重爬 62 分钟 0 新增)
2026-10-25 20:07:54 +08:00
spider
feat: 抓取期间每 60 秒打一次进度心跳
2026-10-25 20:50:05 +08:00