修复url深度爬取无法中止等问题 #10

Open

opened

on Oct 25, 2022

目前的url爬取是深度无限爬取，存在无法中止以及可能的重复爬取问题
需要更改后做到

深度有限制
超时解决
无重复爬取问题

Metadata

Assignees

No one assigned

Labels

No labels

No labels

Projects

No projects

Milestone

No milestone

Relationships

None yet

Development

No branches or pull requests