码迷,mamicode.com
首页 > 其他好文 > 详细

Scrapy:虎牙爬取,图片存储与数据分析

时间:2018-10-15 00:00:04      阅读:461      评论:0      收藏:0      [点我收藏+]

标签:问题   bubuko   有一个   头像   and   data   信息   taf   数据   

第一次爬取虎牙主播数据,有点小激动

1.共批量爬取的101个主播的,包括

  • 头像
  • 主播名字
  • 房间号
  • 房间链接
    技术分享图片

    2.数据规整部分,需要将json数据加载到pandas的Dataframe,只显示的前15个主播的信息

    技术分享图片

    3.数据绘图部分,有一个字体问题没解决,中文乱码,明日修正

    技术分享图片

Scrapy:虎牙爬取,图片存储与数据分析

标签:问题   bubuko   有一个   头像   and   data   信息   taf   数据   

原文地址:https://www.cnblogs.com/yangjing000/p/9788805.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!