码迷,mamicode.com
首页 > Web开发 > 详细

关于webmagic的post请求

时间:2020-02-13 19:28:59      阅读:257      评论:0      收藏:0      [点我收藏+]

标签:page   span   https   show   add   postman   request   img   chrome   

在很多网址上,都有下一页这个button,而很多都是通过发送post请求来获取参数,今天我们就来看一下post的具体发送方式。

我之前发送一直不成功,原因是在发送json的格式上出了错,我之前写的时候,总是会把双引号改成单引号,导致发送失败。所以按照原来的post请求发送就可以,比如

这个网页的post请求是这样的:

技术图片

 

 

 点击view source:

技术图片

 复制

技术图片
1 {"PageCond/begin":6,"PageCond/length":6,"PageCond/isCount":"true","keywords":"","orgids":"","startDate":"","endDate":"","letterType":"0","letterStatue":"0"}
View Code

写成这个样子就可以了

技术图片

 

 

技术图片
1 Request request = new Request("http://www.beijing.gov.cn/hudong/hdjl/com.web.search.mailList.mailList.biz.ext");
2         request.setMethod(HttpConstant.Method.POST);
3         request.addHeader("Content-Type", "application/json");
4         request.addHeader("User-Agent",
5                 "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.130 Safari/537.36");
6         request.setRequestBody(HttpRequestBody.json("{\"PageCond/begin\":" + i * 6
7                 + ",\"PageCond/length\":6,\"PageCond/isCount\":\"true\",\"keywords\":\"\",\"orgids\":\"\",\"startDate\":\"\",\"endDate\":\"\",\"letterType\":\"\",\"letterStatue\":\"\"}",
8                 "utf-8"));
9         page.addTargetRequest(request);
View Code

 

还有不确定的post请求可以用postman来尝试,postman是个好东西。

这是他的使用方法:

https://www.cnblogs.com/msdog/p/12304286.html

 

关于webmagic的post请求

标签:page   span   https   show   add   postman   request   img   chrome   

原文地址:https://www.cnblogs.com/msdog/p/12304447.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!