public class HtmlUtil { // 只有纯文本可以通过 public static String getText(String html) { if (html == null) return null; return Jsoup.clean(html, Whitelist.non ...
分类：
Web程序 时间：
2019-08-19 17:14:08
阅读次数：
179
怎么说呢，静态的页面，但我也写了动态的接口支持，方便后续爬取别的新闻网站使用。 之后就是爬虫; 结果： 当然还没有清洗内容，后续会清洗以及爬取动态网站啥的。 参考博客：https://blog.csdn.net/gx304419380/article/details/80619043#comment ...
分类：
Web程序 时间：
2019-08-09 19:43:58
阅读次数：
197
loadrunner 接口测试： get、post(3种参数格式)、cookie及token处理、加密接口、webservice、socket、文件上传接口、文件下载接口 & 中文乱码处理 1.get请求 2.post请求--参数为key=value形式 3.post请求--参数为json形式 4. ...
分类：
其他好文 时间：
2019-07-29 14:23:38
阅读次数：
83
Listlist=newArrayList();Documentdocument=Jsoup.parse(newFile("E:\\test\\erp_index.html"),"UTF-8");finalElementsbookname=document.getElementsByClass("bookname");finalElementsbookzz=document.getElements
分类：
编程语言 时间：
2019-07-20 11:36:25
阅读次数：
96
Jsoup简介 Java爬虫解析HTML文档的工具有： , 。本文将会详细介绍 的使用方法，10分钟搞定Java爬虫HTML解析。 可以直接解析某个URL地址、HTML文本内容，它提供非常丰富的处理Dom树的API。如果你使用过 ，那你一定会非常熟悉。 最强大的莫过于它的CSS选择器支持了。比如： ...
分类：
编程语言 时间：
2019-06-21 13:13:49
阅读次数：
431
webmagic简介： WebMagic是一个简单灵活的Java爬虫框架。你可以快速开发出一个高效、易维护的爬虫。 http://webmagic.io/ 准备工作： Maven依赖（我这里用的Maven创建的web项目做测试）： <dependencies> <!-- junit --> <dep ...
分类：
编程语言 时间：
2019-06-13 17:24:17
阅读次数：
142
一、request处理表单数据及乱码 1.1 处理单个表单数据用request.getParameter("x"); 1.2 处理多个表单(checkbox、select)数据用request.getParameterValues("x"); 二、乱码的解决： 2.1 解决提交数据乱码 2.1.1 ...
分类：
其他好文 时间：
2019-06-10 09:13:46
阅读次数：
65
需要引入Jsoup依赖： Jsoup相关依赖：https://jsoup.org/ 其他需要的是 FileHelper 类，参见： "https://www.cnblogs.com/zifeiy/p/9224569.html" （不过我们这边可能需要将"UTF 8"改成"GBK" ~） 然后实现的类 ...
分类：
编程语言 时间：
2019-06-02 15:48:35
阅读次数：
169
在前面分享的两篇随笔中分别介绍了HttpClient和Jsoup以及简单的代码案例： Java爬虫系列二：使用HttpClient抓取页面HTML Java爬虫系列三：使用Jsoup解析HTML 今天就来实战下，用他们来抓取酷狗音乐网上的 Top500排行榜音乐。接下来的代码中除了会用到HttpCl ...
分类：
编程语言 时间：
2019-05-27 23:28:52
阅读次数：
785
这里介绍两种 java 解析工具。 第一种：java 解析 html 工具 jsoup 第二种： java 解析 XML 工具 Dom4j jsoup jsoup是一个用于处理真实HTML的Java库。它提供了一个非常方便的API，用于提取和操作数据，使用最好的DOM，CSS和类似jquery的方法 ...
分类：
编程语言 时间：
2019-05-26 13:19:59
阅读次数：
185
