执行yum list installed | grep xxx 命令时报错 模块依赖问题 问题 1: conflicting requests - nothing provides module(perl:5.26) needed by module perl-DBD-SQLite:1.58:801 ...
分类：
数据库 时间：
2020-05-03 10:47:34
阅读次数：
93
数据采集利用各种手段获取数据,数据样式不限制,但一般而言是形如excel或者csv这样的表格格式。数据采集:urllib,requests数据解析:Xpath,BS4,正则表达式数据持久化存储:pd.to_csv,pd.to_excel,MySQL,Redis数据预处理一般而言,数据分析和数据挖掘领域的处理的数据都是海量的数据,这样的数据难免会出现问题。数据预处理占到数据挖掘工作的60%,这是最重
分类：
编程语言 时间：
2020-05-03 00:58:59
阅读次数：
67
安装 Requests 依赖库 pip install requests Collecting requests Using cached requests-2.23.0-py2.py3-none-any.whl (58 kB)Requirement already satisfied: urlli ...
分类：
其他好文 时间：
2020-05-02 21:07:26
阅读次数：
456
# -*- coding: utf-8 -*- """ requests.api ~~~~~~~~~~~~ This module implements the Requests API. :copyright: (c) 2012 by Kenneth Reitz. :license: Apache ...
分类：
其他好文 时间：
2020-05-02 21:03:57
阅读次数：
57
Python使用第三方包requests发送请求，实现接口自动化 发送请求分三步： 1、组装请求：包括请求地址、请求头header、cookies、请求数据等 2、发送请求，获取响应：支持get、post等方法 3、解析响应 一、最简单的get请求 requests.get(url=rul) #co ...
分类：
编程语言 时间：
2020-05-02 19:03:55
阅读次数：
332
代码： import pandas as pdimport requests as rqfrom bs4 import BeautifulSoupurl="http://tieba.baidu.com/hottopic/browse/topicList?res_type=1"def res_capu ...
分类：
其他好文 时间：
2020-05-01 14:33:48
阅读次数：
236
```yaml kind: Deployment apiVersion: apps/v1 metadata: name: jenkins namespace: paas-jenkins spec: replicas: 1 selector: matchLabels: app: jenkins tem... ...
分类：
其他好文 时间：
2020-05-01 00:57:36
阅读次数：
69
先说一下本人学习爬虫的过程吧，先是下载了requests库，BeautifulSoup库，并根据MOOC上和网络上的资料进行爬虫学习。个人比较喜欢钢琴曲，就尝试去爬取爬取世界十大钢琴名曲简介。根据所学，写下了如下代码： 但得到的结果是（内容太多就只截取一部分）： 不难发现，里面很多内容并不是我想要的 ...
分类：
其他好文 时间：
2020-04-30 21:12:23
阅读次数：
71
简述：BeautifulSoup 外， python常用的解析HTML、XML的第三方库：lxml， lxml中语法为xpath 1. 使用爬取的页面数据，来定义一个对象。 2. 使用xpath来解析这个对象中的标签树。 """lxml使用xpath语法，来解析HTML""" from lxml i ...
分类：
Web程序 时间：
2020-04-30 17:24:01
阅读次数：
86
POD资源：requests:需求，最低保障limits:限制，硬限制CPU：一颗逻辑CPU（一个核心）1=1000微核，millicores500m=0.5CPU内存：E、P、T、G、M、KEi、Pi、Ti、Gi、Mi、Ki、Qos：Guranteed：最高优先级，确保、保证同时设置了CPU和内存的requests和limits，cpu.limits=cpu.requestsmemory.lim
