Beautifulsoup模块 一 介绍 Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时甚至数天的工作时间.你可能在寻找 Beautiful So ...
分类:
其他好文 时间:
2019-01-20 13:47:39
阅读次数:
147
QuerySet API详解-values和values_list: values:用来指定在提取数据出来,需要提取哪些字段。默认情况下会把表中所有的字段全部都提取出来,可以使用values来进行指定,并且使用了values方法后,提取出的QuerySet中的数据类型不是模型,而是在values方法 ...
JSON提取器可以很方便的让你从JSON响应格式中提取数据。 1)Name:JSON提取器的名称。 2)Apply to:应用范围,有些采样器还嵌套子采样器,可以在此处设置JSON提取器是作用与主采样器和子采样器还是仅仅主采样器等。 3)Names of created variables:分号分割 ...
分类:
Web程序 时间:
2019-01-15 00:50:20
阅读次数:
1014
ORM聚合函数详解-准备工作: 如果你用原生SQL,则可以使用聚合函数来提取数据。比如提取某个商品销售的数量,那么可以使用count,如果想要知道商品销售的平均价格,那么可以使用avg。聚合函数是通过aggregate方法来实现的。在讲解这些聚合函数的用法的时候,都是基于以下的模型对象来实现的。 创 ...
分类:
数据库 时间:
2019-01-08 22:52:56
阅读次数:
168
【Django数据库】ORM查询条件详解-range range:判断某个 field 的值是否在给定的区间中。示例代码如下: 以上代码的意思是提取所有发布时间在 2019/1/7 21点 到 22点之间的文章。将翻译成以下的 SQL 语句: 需要注意的是,以上提取数据,不会包含最后一个值。也就是不 ...
分类:
数据库 时间:
2019-01-07 22:36:47
阅读次数:
245
我们在用Jmeter做接口或者性能测试时,经常会碰到第二个请求提交的的参数要从第一个请求返回的参数中获取,而这些参数值并不是固定的,是动态变化的,这种场景就要用到关联 Jmeter提供了一种叫做正则提取器的组件来提取数据。 场景: 通过下面这个接口可以获取到某个城市的天气 http://www.we ...
分类:
其他好文 时间:
2019-01-06 21:54:46
阅读次数:
177
我们在上一篇文章中简单地介绍了数据分析的知识,数据分析知识主要分为5个模块,分别是数据获取、数据存储与提取、数据预处理、数据分析、数据可视化。不同模块的内容难易也是不一样的,下面我们就开始给大家详细讲解一下数据分析其他方面的知识。 ...
分类:
其他好文 时间:
2018-12-27 18:21:59
阅读次数:
117
title: 常用SQL语句 toc: true date: 2018 09 29 11:55:20 categories: Web tags: 数据库 SQL 一些最重要的 SQL 命令 SELECT 从数据库中提取数据 UPDATE 更新数据库中的数据 DELETE 从数据库中删除数据 INSE ...
分类:
数据库 时间:
2018-12-26 20:21:46
阅读次数:
150
根据特定的需求,抓取指定的数据 代替浏览器上网 网页的特点: 1、网页都有自己唯一的URL 2、网页内容都是html结构 3、使用的都是http或https协议 爬虫步骤: 1、给一个URL 2、写程序,模拟浏览器访问URL 3、解析内容,提取数据 环境: windows环境、linux环境 pyt ...
分类:
编程语言 时间:
2018-12-26 00:27:22
阅读次数:
244
Scrapy Scrapy 是一个位了爬取网站数据,提取数据结构性数据而编写的应用框架,少量代码,就能快速爬取,使用了Twisted 异步网络框架,加快我们下载速度! 工作流程 制作 Scrapy 爬虫 一共需要4步: 新建项目 (scrapy startproject xxx):新建一个新的爬虫项 ...
分类:
其他好文 时间:
2018-12-24 22:04:44
阅读次数:
198