package PaChong; import org.jsoup.Jsoup; import org.jsoup.nodes.Document; import org.jsoup.nodes.Element; import org.jsoup.nodes.Node; import org.jsou ...
分类：
编程语言 时间：
2020-03-16 14:28:41
阅读次数：
86
整理了一些Java方面的架构、面试资料（微服务、集群、分布式、中间件等），有需要的小伙伴可以关注公众号【程序员内点事】，无套路自行领取 更多优选 "一口气说出 9种 分布式ID生成方式，面试官有点懵了" "3万字总结，Mysql优化之精髓" "为了不复制粘贴，我被逼着学会了JAVA爬虫" "技术部突 ...
分类：
数据库 时间：
2020-02-20 13:18:27
阅读次数：
110
整理了一些Java方面的架构、面试资料（微服务、集群、分布式、中间件等），有需要的小伙伴可以关注公众号【程序员内点事】，无套路自行领取 更多优选 "一口气说出 9种 分布式ID生成方式，面试官有点懵了" "3万字总结，Mysql优化之精髓" "为了不复制粘贴，我被逼着学会了JAVA爬虫" "技术部突 ...
分类：
其他好文 时间：
2020-02-17 17:53:07
阅读次数：
59
整理了一些Java方面的架构、面试资料（微服务、集群、分布式、中间件等），有需要的小伙伴可以关注公众号【程序员内点事】，无套路自行领取 本文作者： "程序员内点事" 更多精选 "技术部突然宣布：JAVA开发人员全部要会接口自动化测试框架" "3万字总结，Mysql优化之精髓" 写在前边 受疫情影响一 ...
分类：
编程语言 时间：
2020-02-14 16:12:46
阅读次数：
80
Java爬虫爬取 天猫 淘宝 京东 搜索页和 商品详情。先识别商品url，区分平台提取商品编号，再根据平台带着商品编号爬取数据。利用爬虫技术完成的一个 商品历史价格记录网站 项目——值得吗？价格记录网站 github地址：https://github.com/xivinChen/zhi-de-ma
分类：
编程语言 时间：
2020-01-10 00:51:44
阅读次数：
197
背景 效果 思路 代码准备 依赖（jar包）: 建表 代码 java爬虫过程解析 如何解决分页问题 背景 最近很多大四学生问我毕业设计如何选题 “你觉得图书管理系统怎么样？” “导师不让做这个，说太简单” “那你觉得二手交易平台怎么样？” “导师说没新意，都有咸鱼了你做这个有什么意思？要新颖的” “ ...
分类：
编程语言 时间：
2019-12-27 23:40:57
阅读次数：
212
背景 之前一直在弄一个Java爬虫，将爬取的信息保存到了数据库中。但这毕竟是一个课程设计，在设计前端GUI，展示数据的时候最开始是直接通过select语句从数据库中查找的，但我担心交给老师后，老师还要配置JDBC的参数创建数据库插入表等一些繁琐操作，便想要保存到本地。昨晚看到同学从数据库中导出一个j ...
分类：
编程语言 时间：
2019-11-17 15:02:28
阅读次数：
101
想下载歌曲，可app，网站啥的都需要会员，作为一个穷屌丝，没钱啊。所以想搞个代码去下载歌曲， 打开酷狗top500：http://www.kugou.com/yy/rank/home/1-8888.html 看到只有22个，有看了url猜测分页果然：把url改为：http://www.kugou.c ...
分类：
编程语言 时间：
2019-11-16 12:24:37
阅读次数：
178
网上没有免费的接口，只能自己写一套了，参考代码如下 ...
分类：
编程语言 时间：
2019-10-30 11:43:44
阅读次数：
323
前言使用之前单应用的队列仓库存储抓取的url存在以下两个弊端: 单应用时候,加入服务宕机了,则单应用中的队列仓库里面的url就会为空,则此时就会从页面的首页重新抓取 在加快爬虫抓取速度时候，我们有时候需要部署多节点,实现多节点抓取,加快抓取速度,但是多节点抓取同一个页面时候,怎样保证哪些url已经抓... ...
分类：
编程语言 时间：
2019-10-20 23:59:18
阅读次数：
312
