这是一个使用JAVA语言开发的应用级的分布式爬虫搜索引擎机器人

去吧皮卡丘，为什么取个名字叫皮卡丘，大概是这样萌一些。小哥哥是很可爱的。然后本项目是个爬虫项目，使用时候就像派出小精灵一样，派出皮卡丘，就会为你抓回对应的数据。

又一个 java 爬虫

分布式敏捷的爬虫框架

使用JCEF（chromium内核）开发的抓取数据浏览器，可以用来制作浏览器，也可以用来制作爬虫。

Spring Boot项目框架，结合多种开源技术，知乎信息中转持久化的数据流平台，并提供HTML+JSON和RabbitMQ等消息接口，从而使有兴趣的伙伴开发并使用其熟悉的语言环境，实现信息爬取，从而持久化到此项目中来，完成最开始的开发目标。

最新代码链接:码云上不在更新

java抓取微信最新推送内容

nlp项目基础框架：爬虫，针对动态网页（JS）的专有爬虫

java编写的带有web管理后台的抓取程序，自动生成搜索URL，简单实现数据抽取即可，支持多机，任务定时自动运行等功能，提供各种扩展点，适应各种情况

运行于java环境的一个免费开源的企业信息采集器（简单的java网络爬虫）。 信息采集完成后自动导出Excel表格。 基于Jsoup+Poi+Sqlite开发完成。

一个通用的爬虫

使用springboot、spring-data-jpa、webmagic等技术，定时爬取爱奇艺视频、360视频

音乐歌单目录导出软件，网易云等各大音乐平台由于版权问题，间歇性的会让一些收藏的音乐无法播放，所以做了这个小软件，把常见的音乐网站的个人收藏的歌单导出备份，目前实现导出网易云音乐个人收藏的歌单，后面再不断兼容其他音乐网站的歌单导出功能吧。 后续计划： 1.模拟登陆直接导出，无需下载静态页面导出；   2.跨音乐网站，把本地歌单文件导入其他音乐网站；

(此项目将迁移至 GitHub，并计划迎来一次基于 AI 技术的重大升级。届时，它将从一个 Demo 演进为一个功能完备的网站应用，底层技术架构也可能不再依赖传统的爬虫方案。) Java爬虫实现，SpringBoot + HttpClient+Jsoup 爬虫Demo，满屏注释，适合入门