A Java componentized distributed crawler framework. 一个Java版本的组件化的分布式通用爬虫
☆163Dec 5, 2023Updated 2 years ago
Alternatives and similar repositories for ScriptSpider
Users that are interested in ScriptSpider are comparing it to the libraries listed below
Sorting:
- 基于okhttp3+RxJava2+RxAndroid+greenDao的Android网络通信组件；支持Callback和RxJava2两种形式回调；支持文件下载及下载管理；支持断点续传等☆80Oct 29, 2017Updated 8 years ago
- first spider project,using webmagic☆33Jun 28, 2017Updated 8 years ago
- 一个简单易用的爬虫框架,内置代理管理模块,灵活设置多线程爬取☆62Feb 23, 2017Updated 9 years ago
- 极简使用的解耦Loading组件☆182Apr 4, 2019Updated 6 years ago
- 中国明星数据爬取。你甚至可以拿到互联网上所有的人之间的关系，接下来你可以自己发挥！基于这些数据，你可以完成更多有趣的事情。比如说社交网络分析，关系网络可视化，算法研究，和其他有意思的事情。Chinese star data crawling. You can even ge…☆28Mar 6, 2018Updated 7 years ago
- 设计模式的总结与例子（有XMind，Uml图和详细代码实现说明）☆271Oct 26, 2018Updated 7 years ago
- 新版代码生成器☆10Apr 19, 2018Updated 7 years ago
- 爬取了一些新闻，建立索引！简单分析了一些数据，做了一些前台的可视化工作。This is the "information system modeling" course assignments. Climb up some news, build index! Simple…☆21Jan 18, 2019Updated 7 years ago
- JEECMS是一款基于JAVA技术研发的站群管理系统。 1、支持大规模网站群管理； 2、跨站全文检索、数据共享； 3、微官网/手机网站同步建设； 4、高效二次开发的插件化管理 5、支持可视化模板制作；☆25Nov 2, 2016Updated 9 years ago
- 基于springcloud开发的分布式美剧订阅系统(含爬虫)☆17Jun 20, 2023Updated 2 years ago
- 🐝 Web vertical crawler framework for fun☆193Dec 16, 2023Updated 2 years ago
- ZkConfig是为zookeeper开发的配置服务工具包，能与现有的Java系统进行良好的集成，也可以使用与非java系统以独立进程运行。提供与spring进行集成的插件。采用注解方式对需要动态更新的内存数据对象进行标注。 ZkConfig用于解决在系统集群中配置文件的实…☆25Apr 17, 2015Updated 10 years ago
- 自己写的自动化部署小工具：执行预设命令，通过http调用☆25Feb 26, 2018Updated 8 years ago
- 基于netty实现的redis proxy☆13May 5, 2016Updated 9 years ago
- ProCamera是一款基于Camera2 API的相机，实现了相机的常用功能，力求不断挖掘Camera2的巨大潜力，锻造一款在功能和设计上完美的相机产品。☆450Oct 14, 2022Updated 3 years ago
- 又一个号称高性能的 java 爬虫工具/爬虫框架☆123Oct 29, 2019Updated 6 years ago
- Spring 集成 MongoDB 的项目以及做的一些练习☆12Feb 14, 2019Updated 7 years ago
- ☆36Jul 13, 2023Updated 2 years ago
- 拉勾网数据爬虫☆32Sep 22, 2017Updated 8 years ago
- 微信企业号实例代码java版 jssdk，access_token，ticket，oauth媒体文件的上传下载，通讯录管理，菜单管理☆12Oct 15, 2015Updated 10 years ago
- ServiceFramework 示例项目☆10Apr 2, 2016Updated 9 years ago
- An easy-to-use, scalable spark streaming ETL tool and sdk☆13Aug 14, 2017Updated 8 years ago
- Simple Streaming Player using ExoPlayer Lib☆11Sep 11, 2017Updated 8 years ago
- 基于hadoop思维的分布式网络爬虫。☆85Mar 8, 2016Updated 9 years ago
- 基于Java的多线程爬虫框架☆11Jun 14, 2024Updated last year
- 一个基于机器学习的从开发到运维再到经营决策的高效平台☆11Aug 18, 2020Updated 5 years ago
- Java后端常用工具类、缓存接口、消息队列接口、第三方支付接口封装；Restful接口参数验证，错误信息友好提示；分布式方法锁。☆281Feb 22, 2023Updated 3 years ago
- java spring redies：订阅/发布系统；统一配置管理；lua脚本实现分布式锁；缓存应用（连接池，切片连接池，哨兵模式）☆29Dec 10, 2022Updated 3 years ago
- A mini and excellent Router Framwork一款小而美的路由框架。网页动态添加自定义参数启动应用。 https://github.com/Jomes/routerSDK☆386Feb 24, 2017Updated 9 years ago
- Chromium-based headless browser for java☆28Oct 14, 2016Updated 9 years ago
- 使用Maven构建的SSM项目 ，仿起点网,未完工☆11Jun 13, 2017Updated 8 years ago
- middle-ground-service(中台基本架构)☆14Apr 24, 2018Updated 7 years ago
- 在线小游戏集合，使用 spring-boot-webflux、websocket☆12Jun 14, 2023Updated 2 years ago
- 天气爬虫（全国城镇天气自动定时抓取更新，并开放RESTful查询接口），附带代理IP池定时更新并检测其可用性☆367Jun 25, 2018Updated 7 years ago
- Spider项目将会不断更新本人学习使用过的爬虫方法！！！☆16Aug 27, 2017Updated 8 years ago
- rabbitmq示例代码，包括纯java运行和与spring结合运行。☆14Nov 10, 2016Updated 9 years ago
- 美团爬虫,优化了部分中断处理,以及IP代理池☆14Mar 2, 2021Updated 5 years ago
- 使用一致性哈希consistent-hashing来实现分布式redis,基于spring使用的缓存工具☆14Aug 3, 2017Updated 8 years ago
- 这是2020年哎哟迪奥基于wechaty做的一个typescript版机器人。技术栈：typescript（编程语言）、koa2（服务器端框架）、jest（测试框架）、docker（线上部署）、wechaty（微信机器人SDK）。☆12Dec 10, 2022Updated 3 years ago