README.md · huanzi-qch/spider - Gitee.com

加入 Gitee

与超过 1200万开发者一起发现、参与优秀开源项目，私有仓库也完全免费：）

克隆/下载

README.md 2.33 KB

## 简介<br/> 
Spider网络爬虫Demo，主要功能有：抓取小说并保存到本地TXT文件；小说线上采集阅读；ip代理池维护，并制作简易流量爬虫；乐心健康步数测试；<br/>

## 免责声明<br/> 
源码免责声明：一切开发旨在学习，请勿用于非法用途，违者请自行承担一切法律后果；

## 仓库地址<br/> 
国外：https://github.com/huanzi-qch/spider<br/> 
国内：https://gitee.com/huanzi-qch/spider<br/>

## 前往博客查看详情<br/> 
具体介绍请看我的博客[《spider》](https://www.cnblogs.com/huanzi-qch/category/1184576.html)<br/>

| 项目 | 博客 |
|  ----  | ----  |
| novel-gather | [HttpClients+Jsoup抓取笔趣阁小说，并保存到本地TXT文件](https://www.cnblogs.com/huanzi-qch/p/9767698.html) |
| novel-reading | [httpclient+jsoup实现小说线上采集阅读](https://www.cnblogs.com/huanzi-qch/p/9817831.html)<br/> [htmlUnit加持，网络小蜘蛛的超级进化](https://www.cnblogs.com/huanzi-qch/p/9869471.html) |
| common-spider <br/> flow-spider | [免费IP代理池定时维护，封装通用爬虫工具类每次随机更新IP代理池跟UserAgent池，并制作简易流量爬虫](https://www.cnblogs.com/huanzi-qch/p/11347430.html) <br/> [博客园随笔备份Java脚本](https://www.cnblogs.com/huanzi-qch/p/15397305.html) |

## [AD广告位](https://huanzi-qch.gitee.io/file-server/ad/adservice.html) （长期招租，如有需要请私信）<br/> 
[【基塔后台】免费后台管理系统，低代码快速搭建管理后台](https://www.jeata.com/?hmsr=promotion&hmpl=huanzi-qch) <br/>
<br/>
[【阿里云】阿里云最全的优惠活动聚集地！](https://www.aliyun.com/activity?userCode=ckkryd9h) <br/>
[【腾讯云】腾讯云当前最新优惠活动专区！](https://cloud.tencent.com/act/cps/redirect?redirect=11447&cps_key=e1c9db729edccd479fc902634492bf53) <br/>
<br/>

## QQ群<br/>
有事请加群，有问题进群大家一起交流！<br/>
![](https://huanzi-qch.gitee.io/file-server/images/qq.png)

## 捐献<br/>
相应的资金支持能更好的持续项目的维护和开发，如果喜欢这个项目，请随意打赏！

| 支付宝 | 微信 |
|  ----  | ----  |
| <img src="http://huanzi-qch.gitee.io/file-server/images/zhifubao.png"  width="150"> | <img src="http://huanzi-qch.gitee.io/file-server/images/weixin.png" width="150"> |

一键复制编辑原始数据按行查看历史

提交于 2022-03-17 16:42 . 1、readme文档更新；

简介

Spider网络爬虫Demo，主要功能有：抓取小说并保存到本地TXT文件；小说线上采集阅读；ip代理池维护，并制作简易流量爬虫；乐心健康步数测试；

免责声明

源码免责声明：一切开发旨在学习，请勿用于非法用途，违者请自行承担一切法律后果；

仓库地址

国外：https://github.com/huanzi-qch/spider
国内：https://gitee.com/huanzi-qch/spider

前往博客查看详情

具体介绍请看我的博客《spider》

项目	博客
novel-gather	HttpClients+Jsoup抓取笔趣阁小说，并保存到本地TXT文件
novel-reading	httpclient+jsoup实现小说线上采集阅读 htmlUnit加持，网络小蜘蛛的超级进化
common-spider flow-spider	免费IP代理池定时维护，封装通用爬虫工具类每次随机更新IP代理池跟UserAgent池，并制作简易流量爬虫博客园随笔备份Java脚本

AD广告位（长期招租，如有需要请私信）

【基塔后台】免费后台管理系统，低代码快速搭建管理后台

 【阿里云】阿里云最全的优惠活动聚集地！
【腾讯云】腾讯云当前最新优惠活动专区！

QQ群

有事请加群，有问题进群大家一起交流！

捐献

相应的资金支持能更好的持续项目的维护和开发，如果喜欢这个项目，请随意打赏！

支付宝	微信

Java

1

https://gitee.com/huanzi-qch/spider.git

git@gitee.com:huanzi-qch/spider.git

huanzi-qch

spider

spider

master