数据清洗之数据表处理 1. 数据常用筛选方法 In [ ]: import pandas as pd import numpy as np In [ ]: import os # 更改文件路劲 os.chdir('F:\CSDN\课程内容\代码和数据') In [ ]: df = pd.read_c ...
分类:
其他好文 时间:
2020-02-05 00:04:49
阅读次数:
88
数据清洗之文件操作 这是一个关于淘宝母婴产品的用户消费行为的数据集,然后基于这个数据集,做数据清洗 csv文件读写 In [ ]: import pandas as pd import numpy as np import os In [ ]: # 更改文件路劲 os.chdir('F:\CSDN\ ...
分类:
数据库 时间:
2020-02-04 23:53:22
阅读次数:
123
Numpy常用数据结构 1. 数组创建 In [ ]: # 导入库 import numpy as np In [ ]: arr1 = np.array([-9,7,4,3]) In [ ]: arr1 In [ ]: arr2 = np.array([-9,7,4,3],dtype =float) ...
分类:
其他好文 时间:
2020-02-04 22:08:05
阅读次数:
110
flume agent 内部原理 1、Source采集数据,将数据封装成Event对象,然后将数据交给 Channel Processor (利用该类的方法进行下一步的处理) 2、 Channel Processor 将Event事件传递给拦截器链(Intercepter,进行简单的数据清洗),然后 ...
分类:
Web程序 时间:
2020-01-26 14:29:01
阅读次数:
130
一、前言 上一节已经对这次的实战北京做了介绍,这一节主要介绍数据清洗。 唯一的就是,今天大年三十,祝大家新年快乐,来年事业、家庭都能如意!!! 二、实战-数据清洗 导入库 #导入库import pandas as pd import numpy as np import matplotlib.pyp ...
分类:
其他好文 时间:
2020-01-24 10:51:58
阅读次数:
100
数据科学第三章 1.Panda 的数据结构 (1)引入panda包 part 1 (2)Series对象 part 2 13 187 14 190 7 185 2 178 9 185 dtype: int64 part 3 13 187 14 190 7 185 2 178 9 185 dtype: ...
分类:
其他好文 时间:
2020-01-15 13:58:11
阅读次数:
91
课程介绍:此项目为GUI+爬虫+反反爬虫+网络多线程+自动打码+缓存机制+数据清洗等多项技术综合一体的项目;开发中更能体验抓包思路, MVC, 分层, 封装重构等思想课程目录:001、12306抢票软件项目-项目展示002、12306抢票项目开篇-2019新年快乐!003、抢票软件项目-项目需求和原 ...
分类:
编程语言 时间:
2020-01-14 23:31:49
阅读次数:
209
1,从数据处理到人工智能。 数据表示 ->数据清洗->数据统计->数据可视化->数据挖掘->人工智能 数据表示:采用合适方式用程序表达数据。 数据清理:数据归一化,数据转换,异常值处理。 数据统计:数据的概要理解,数量。分布。中位数等。 数据可视化:直观展示数据内涵的方式。 数据挖掘:从数据分析获得 ...
分类:
编程语言 时间:
2020-01-10 20:03:04
阅读次数:
117
除了基础的数据查询开发功能,DMS还内置SQL审核、性能诊断优化、测试数据自动生成、多环境数据对比同步、数据库日志追踪回滚、不锁表变更、访问控制、敏感数据脱敏、安全审计等高端功能。 1、丰富的数据源 🔸丰富的数据库类型支持(当前已超过25种,还在不断扩展中) MySQL、SQL Server、Po ...
分类:
数据库 时间:
2020-01-10 15:54:15
阅读次数:
105