前一篇文章"[python爬虫] Selenium爬取新浪微博内容及用户信息"简单讲述了如何爬取新浪微博手机端用户信息和微博信息。
用户信息:包括用户ID、用户名、微博数、粉丝数、关注数等。微博信息:包括转发或原创、点赞数、转发数、评论数、发布时间。
而这篇文章主要爬取客户端的微博信息,相对信息更多;同时登录微博后在输入框中搜索热点话题,然后依次爬取微博信息和对应的评论,同时遇到了评论动态加载的爬取问题。...
分类:
编程语言 时间:
2016-04-24 08:42:56
阅读次数:
997
4月11日,YoMail邮箱客户端 新版 6.0 正式发布。经过一段时间的测试,新增的系列功能获得用户的一致好评。应YoMail邮箱客户端粉丝的要求,并结合了目前国内已经引入企业协同办公系统进行团队办公协同、任务管理的几十个行业的实际应用背景需求,YoMail 6.0 Mac 版 和 YoMail ...
分类:
其他好文 时间:
2016-04-22 16:19:11
阅读次数:
155
python Restful API 微博开放平台: open.weibo.com: 点击文档进入API查看界面 点击API文档进行查看: 比如点开粉丝数的API可以看到: pro.jsonlint.com可以将一些格式不太清晰的字符串转换成易读的json格式。 RESTful的起源和设计理念 1. ...
上次作业中提到初入B站的经历、体会、以及B站首页问题衍生的对目前web网页的看法。随着几天的慢慢深入体验, 在B站上发现了越来越多的感兴趣的UP主和UP主们的视频作品。我第一个关注的是暴走漫画的敖厂长,刚看到就关注了 敖厂长,毕竟暴漫粉丝。看了几期敖厂长的游戏解说视频后不得不佩服敖厂长的口才。下面的 ...
分类:
移动开发 时间:
2016-04-16 23:12:22
阅读次数:
395
每个圈子都有一群能力强且懂得经营自己的人,技术圈也是如此。本期 fir.im Weekly 一如往期精选了一些实用的 iOS,Android 开发工具和源码分享,还有一些关于程序员的成长 Tips 和活动分享~GitHub 中国区 Top 100 大神解密根据Github公开 API 抓取地址显示 China 的用户,并依据粉丝关注排名以及属性分析,@优雅的程序员D 罗列出『github 中国区粉丝...
分类:
其他好文 时间:
2016-04-13 13:16:07
阅读次数:
232
Redis实现Timeline 上回写了使用Redis实现关注关系,这次说说使用Redis实现Timeline。 Timeline的实现一般有推模式、拉模式、推拉结合这几种。推模式:某人发布内容之后推送给所有粉丝,空间换时间,瓶颈在写入;拉模式:粉丝从自己的关注列表中读取内容,时间换空间,瓶颈在读取 ...
分类:
其他好文 时间:
2016-04-11 12:11:38
阅读次数:
151
一男老师气愤地对一上课睡觉的 女生说:我在上面累的要死,你在下面一动不动!不配合也就罢了,连点反应都没有,将来要是肚子里没东西,可别怪老师不行 !结果全班晕倒。 更多好玩,搞笑的语录,视频尽在喷饭网(http://www.penfan.com),欢迎大家前来订阅!同时也期待喷饭粉丝QQ群:37447 ...
分类:
其他好文 时间:
2016-04-09 10:27:27
阅读次数:
119
非洲黑妹去上海旅游,住进一宾 馆。半夜失火。那非洲女人飞快向外跑。一消防员看到惊奇的说 :我的娘唉,都烧焦了还跑得这么快!! 更多好玩,搞笑的语录,视频尽在喷饭网(http://www.penfan.com),欢迎大家前来订阅!同时也期待喷饭粉丝QQ群:374472682。与我们一起互动吧! ...
分类:
其他好文 时间:
2016-04-09 10:25:59
阅读次数:
153
GitHub中国区前100名到底是什么样的人? 本文根据Github公开API,抓取了地址显示China的用户,根据粉丝关注做了一个排名,分析前一百名的用户属性,剖析这些活跃在技术社区的牛人到底是何许人也!后续会根据我的一些经验出品《技术人员如何建立自己的个人品牌》《优雅的程序员列传》欢迎加我微信d ...
分类:
其他好文 时间:
2016-04-07 08:23:37
阅读次数:
1055
因为项目要在PC端搞一个微信墙功能,就是把粉丝发送过来的上墙内容给展示出来,但因为微信对微信素材进行了防盗链加密处理,所以在非微信页面上直接引用在微信服务器上的图片的链接是无法显示的,只会显示一张微信默认提示图片,如果我们要调用的话就只能先调用微信获取临时素材接口 ...
分类:
微信 时间:
2016-04-07 01:04:52
阅读次数:
401