一、代码演示 如果中途中断,可进行刷选过滤已拉取省份数据 /** * TODO * * @author kevin * @createTime 2019-11-18 19:37 */ @RestController public class CityController { @Autowired p ...
分类:
编程语言 时间:
2019-11-25 09:53:08
阅读次数:
75
声明:本博客纯属技术学习,由于是用爬虫形式实现的,不确定是否违反相关法律,若进行商用请自行咨询学信网,学信网网址:https://www.chsi.com.cn/ 1.添加依赖 外部依赖有jsoup,taip,fastjson。 jsoup用来解析html; taip是腾讯AI的java 非官方ap ...
分类:
其他好文 时间:
2019-11-23 18:15:38
阅读次数:
216
昨天LZ去面试,遇到一个大牛,被血虐一番,发现自己基础还是很薄弱,对java一些原理掌握的还是不够稳固,比如java反射注解,知道一点就是说不出来,很尴尬… 生命不止,学习不止啊之前那个项目 QNews 用的是的第三方的数据平台,所以访问次数会有限制,这就很无奈。。。我的博客地址每天只能请求100次... ...
分类:
Web程序 时间:
2019-10-11 23:23:35
阅读次数:
234
#环境准备 ##第三方工具包httpclient:抓取网页数据 *get请求 *带参数get请求 *post请求 *带参数post请求 *连接池 *请求参数:时间 #Jsoup *对页面进行解析 *字符串处理工具 *正则表达式 *环境搭建 *导入坐标jsoup,以及其他工具 *解析url *解析字符 ...
分类:
编程语言 时间:
2019-10-11 20:35:50
阅读次数:
102
本文主要分享的是关于Java爬虫技术其中一个方式 ==> Jsoup 1、Jsoup简介 推开技术大门,爬虫技术琳琅满目,而今天要分享的Jsoup是一款Java的HTML解析神器,,可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API。可通过DOM,CSS以及类似于jQuery的 ...
分类:
编程语言 时间:
2019-10-01 15:57:07
阅读次数:
111
一,导入依赖 二,编写demo类 注意不要导错包了,是org.jsoup.nodes下面的 ...
分类:
编程语言 时间:
2019-09-26 23:49:07
阅读次数:
94
spring封装是进行orm封装,可以进行定义数据类型,数据名与接收名相同,进行接收,或者定义类,类的属性名与接收名相同 单个数据类型如图下: 对象类型封装: 其他:乱码处理 在中文字符乱码,需要规定请求响应的编码,可以自己进行过滤器进行过滤设置,但是jar包中给我们提供了此过滤器,我们只需要进行w ...
分类:
编程语言 时间:
2019-09-02 23:53:20
阅读次数:
176
1. 全站乱码过滤 在整个EasyMall项目中,有多处都需要进行乱码处理,这些内容可以提取到一个模块中,这个模块可以是一个过滤器。 过滤器需要将请求与响应中的乱码进行处理。 a. 处理方式: i. 响应乱码 response.setContentType("text/html;charset=ut ...
分类:
其他好文 时间:
2019-08-19 23:03:02
阅读次数:
99