1.4 Pandas速成 Pandas是面向数据分析场景设计的Python开源软件工具包,从命名来看,Pandas特别适合处理序列数据、表格数据等具有良好结构的数据。通过带有标签的列和索引,Pandas使我们可以以一种便于理解的方式来处理数据。它可以让我们毫不费力地从诸如csv类型的文件中导入数据。 ...
分类:
其他好文 时间:
2020-01-19 12:48:31
阅读次数:
79
前言 将数据报表导出,是web数据报告展示常用的附带功能。通常这种功能都是用后端开发人员编写的。今天我们主要讲的是直接通过前端js将数据导出Excel的CSV格式的文件。 原理 首先在本地用Excel新建一个test.csv的文件 > 随便填写一些数据,保存并用Safari浏览打开该文件 > 打开浏 ...
分类:
编程语言 时间:
2020-01-18 10:52:49
阅读次数:
59
一、数据驱动 由于大多数文章和资料都把“读取数据文件”看做数据驱动的标志,下面创建一个baidu_data.csv文件: 文件第一列为测试用例名称,第二列为搜索的关键字。接下来创建test_baidu_data.py文件: 1 import csv 2 import codecs 3 import ...
分类:
其他好文 时间:
2020-01-17 20:46:55
阅读次数:
74
一、python 序列化: 序列化指的是将对象转化为"串行化"数据形式,存储到硬盘或通过网路传输到其他地方,反序列化是指相反的过程,将读取到串行化数据转化成对象。使用pickle模块中的函数,实现序列化和反序列化操作。 序列化使用: pickle.dump(obj,file) obj是被序列化的对象 ...
分类:
编程语言 时间:
2020-01-17 18:43:44
阅读次数:
99
用pandas处理csv文件时,遇到了时间字段RECTIME,现在用pandas读取,字段类型是int64, 现在要提取天或月的字段。 from datetime import datetime from datetime import date import time # str=20190405 ...
分类:
编程语言 时间:
2020-01-17 13:21:48
阅读次数:
65
日期:2020.01.15 博客期:124 星期三 嗯,把这几天学习进度汇总一下: 1、CSV文件、XML文件、JSON文件的处理整合 这一部分详细的让我明天把博客整理出来,你们就能看到了,不过这一部分代码,借鉴了好多其他博主的,我在此声明一下:数据的文件读写部分(除CSV文件外,其余两个)不是本博 ...
分类:
其他好文 时间:
2020-01-16 01:19:46
阅读次数:
91
psql是postgreSql的命令行cli,提供了一系列的数据库操作,这里重点介绍copy命令和\copy命令。 >>> copy (select * from table1) to '/tmp_data/bak.csv' with csv; 【注】运行时可能会报权限错误,因copy命令数据服务器 ...
分类:
数据库 时间:
2020-01-16 00:34:20
阅读次数:
128
cankao : https://blog.csdn.net/enjolras_fuu/article/details/96479807 mongoexport --host 127.0.0.1 --port 27017 --db ELSA_MILESTONE_SUBSCRIPTION_SERVIC ...
分类:
其他好文 时间:
2020-01-14 12:48:48
阅读次数:
100
以上代码会自动每一行多一空行 python3里面对 str和bytes类型做了严格的区分,不像python2里面某些函数里可以混用。所以用python3来写wirterow时,打开文件不要用wb模式,只需要使用w模式,然后带上newline=‘’ ...
分类:
编程语言 时间:
2020-01-12 09:15:26
阅读次数:
97
1、问题描述: 在使用pandas的read_csv的时候,报错,如下,UnicodeDecodeError: 'utf-8' codec can't decode byte 0xd0 in position 254: unexpected end of data。 经过分析,可能是utf-8不识别 ...
分类:
其他好文 时间:
2020-01-12 00:30:34
阅读次数:
319