super-l / supurl

新一代的关键词URL采集系统,采用GO语言开发。可突破搜索引擎的反爬虫机制!根据用户录入的关键词,批量自动化使用主流多个搜索引擎进行采集与统一处理。支持精准采集与大规模深度采集(自动采集相关词),日采集可轻松千万条不重复域名。
10Updated 2 years ago

Related projects

Alternatives and complementary repositories for supurl