Alternatives and similar repositories for web-crawler:

Users that are interested in web-crawler are comparing it to the libraries listed below

• pengwow / jyeoo-crawler-gui
  jyeoo 菁优网图形化爬虫工具
  ☆25Updated 5 years ago
• OpenDFM / MobA
  🎮Manipulates mobile phones just like how you would. Official code for "MobA: A Two-Level Agent System for Efficient Mobile Task Automati…
  ☆17Updated 5 months ago
• bytebuff / dj-poetry-es
  django+es搭建的前后端分离，唐诗宋词搜索引擎。
  ☆34Updated 2 years ago
• Jiang-Fallen / JInfoSpider
  爬虫，爬取皮皮虾、糗事百科、百思不得姐站点的内容
  ☆25Updated 6 years ago
• jielundong / douyin-gg
  抖音用户分享主页信息和无水印视频链接抓取
  ☆45Updated 2 years ago
• yaogengzhu / zhihu-trending-hot-questions
  基于Python3爬取知乎每日热点、每小时更新一次，并归档
  ☆22Updated this week
• xingqiangqiang / zhihu-reptile
  基于nodejs的知乎爬虫，x-zse-96，支持文章，评论，图片下载到本地
  ☆16Updated last year
• NO1117 / book_spider
  基于scrapy-redis的分布式爬虫，爬取JD图书，当当图书和Amazon图书
  ☆16Updated 6 years ago
• ashaowena / Bilibili-monitoring-system-server
  仿飞瓜数据监控平台（B站版），基于ES引擎的统计分析视频弹幕和评论，以及三连关注等基本信息，且不需要密码，这是后端部分
  ☆27Updated 2 years ago
• qhduan / CodeGen
  CodeGen is an open-source model for program synthesis. Trained on TPU-v4. Competitive with OpenAI Codex.
  ☆12Updated 2 years ago
• xiucaicoder / douyin-spider
  抖音无水印视频爬虫
  ☆11Updated 5 years ago
• 13060923171 / bilibili
  怎么去刷B站的播放量，效果一般般吧，如果用代理池会很好，当然想要刷这些东西，都是需要用到代理池的
  ☆30Updated 4 years ago
• Inull-Studio / AutoArknights
  全图形化，可远程的自动明日方舟工具。
  ☆18Updated 3 years ago
• waynerv / A-Python-Interpreter-Written-in-Python-Interpreted-in-Chinese
  用不到500行代码实现一个袖珍的 Python 解释器，代码含中文注释
  ☆13Updated 5 years ago
• datugou / spiders
  各种爬虫：爱企查爬虫，网上114企业信息爬虫，抖音视频爬虫，wipo爬虫， 专利信息爬虫（patentscope）
  ☆72Updated 3 years ago
• lidashuang1996 / p6e_broadcast
  获取国内各大直播平台房间信息（发送的弹幕数据，赠送的礼物数据，等）的 JAVA 应用。目前支持的平台有斗鱼直播（ https://www.douyu.com/ ），火猫直播（ http://www.huomao.com/ ）, BliBli 直播（ https://live…
  ☆26Updated 2 years ago
• suupermans / data-collectors
  基于python开发的可以采集b站，微博，快手，小红书评论的GUI软件
  ☆20Updated last year
• shixiuhai / sxhCrawlerFree
  ☆33Updated last month
• Yakuho / Xiaohongshu
  爬取小红书
  ☆13Updated 5 years ago
• hellokuls / python-course
  最快的Python入门教程，包含Python基础、爬虫、Django、Flask等内容。
  ☆188Updated 3 years ago
• JiyangM / taobao-behavior
  淘宝用户数据行为分析
  ☆23Updated 6 years ago
• hongcyu / char_painting
  用python将视频转为字符画视频video_to_charpaint
  ☆85Updated 3 years ago
• XRSec / tiktok_airtest
  抖音自动化 群控
  ☆44Updated last year
• regaliastar / bili-danmu
  python-哔哩哔哩弹幕下载器
  ☆16Updated 7 years ago
• huangsiyuan924 / js_reverse
  js逆向学习
  ☆16Updated 3 years ago
• fzyzcjy / ai_math_paper_list
  AI for Mathematics Paper List
  ☆17Updated 2 months ago
• maodunWorld / WLWH_LAST
  爱奇艺，腾讯视频爬虫。趣头条，大鱼号，qq cookies http客户端。含腾讯视频滑块破解，视频接口逆向。a webspider for many chainese video website
  ☆25Updated 2 years ago
• roozbeh-yz / IMO-Steps
  ☆14Updated 3 weeks ago
• muzian666 / Yolo-Model-for-Don-t-Strave-together
  为了能让AI自己学习玩一些决策类游戏，比如说《饥荒联机版》，需要让AI识别游戏中的出现的一些图像，所以训练一个新的Yolo模型来让AI识别
  ☆16Updated 3 years ago
• cxapython / bilibilianalysis
  基于aiohttp的bilibili鬼畜视频弹幕爬取，词云图的制作和数据分享
  ☆11Updated 5 years ago