统计学习 前言：机器学习比较重要的几部分：线性模型、统计学习、深度学习，线性部分包括SVM、压缩感知、稀疏编码，都是控制整个模型的稀疏性去做线性函数，偏 Discriminative 判别模型；统计学习主要通过统计方法对数据建模找到极大似然，偏 Generative 生成方法；深度学习就是 neur ...
分类：
其他好文 时间：
2019-10-11 21:56:34
阅读次数：
108
数据分析流程 一般可以按“数据获取-数据存储与提取-数据预处理-数据建模与分析-数据可视化”这样的步骤来实施一个数据分析项目。按照这个流程，每个部分需要掌握的细分知识点如下： 数据获取：公开数据、Python爬虫 外部数据的获取方式主要有以下两种。 第一种是获取外部的公开数据集，一些科研机构、企业、 ...
分类：
编程语言 时间：
2019-10-09 15:18:08
阅读次数：
86
数据库是管理数据的技术，发展了以数据建模和数据库管理系统核心技术为主，内容丰富、领域宽广的一门学科，带动 了一类巨大的软件产业——数据库管理系统（DBMS）产品 及其相关工具和解决方案
数据模型是数据库系统的核心和基础。 ...
分类：
数据库 时间：
2019-10-05 10:27:40
阅读次数：
141
Python分布式爬虫必学框架Scrapy打造搜索引擎 未来是什么时代？是数据时代！数据分析服务、互联网金融，数据建模、自然语言处理、医疗病例分析……越来越多的工作会基于数据来做，而爬虫正是快速获取数据最重要的方式，相比其它语言，Python爬虫更简单、高效 具体的学习scrapy之前，我们先对sc ...
分类：
编程语言 时间：
2019-09-30 21:34:16
阅读次数：
120
理解数据是控制任何企业的先决条件。但只有当这些知识能够被分享和传播时，理解才是有用的。有效的数据建模应该是任何企业架构师的首要关注点。 理解数据是控制任何企业的先决条件。但只有当这些知识能够被分享和传播时，理解才是有用的。有效的数据建模应该是任何企业架构师的首要关注点。 在我的上一篇文章中，我认为理 ...
分类：
其他好文 时间：
2019-09-28 12:46:08
阅读次数：
122
使用WTForms表单验证，可以在数据建模时就设置验证信息和错误提示 创建模型时，设置验证内容，如必填、格式、长度 前台页面，渲染数据信息和错误信息 路由 访问并触发验证 输入符合要求的数据访问 ...
分类：
其他好文 时间：
2019-09-18 01:42:32
阅读次数：
119
注1：本文旨在梳理汇总出我们在建模过程中遇到的零碎小问题及解决方案(即当作一份答疑文档)，会不定期更新，不断完善, 也欢迎大家提问，我会填写进来。 注2：感谢阅读。为方便您查找想要问题的答案，可以就本页按快捷键Ctrl+F，搜索关键词查找，谢谢。 1. 读写csv文件时，存在新的一列，Unnamed ...
分类：
编程语言 时间：
2019-08-24 18:48:26
阅读次数：
153
实现思路：zabbix提供了一个获取事件的api，可以根据此api获取zabbix原始报警数据将获取到的原始数据进行统计去重，统计触发器出现次数，并把重复的触发器删除，将需要用到的数据统一放到一个列表中将第二步的列表进行遍历，并传入到HTML中，或者也可以使用pandas直接把数据建模，然后自动生成HTML表格将生成的HTML作为邮件内容发送定义获取的时间间隔x=(datetime.datetim
分类：
其他好文 时间：
2019-08-09 15:28:42
阅读次数：
147
伴随着对人的了解逐步深入，一个概念悄然而生：用户画像（UserProfile），完美地抽象出一个用户的信息全貌，可以看作企业应用大数据的根基。 一、什么是用户画像？ 男，31岁，已婚，收入1万以上，爱美食，团购达人，喜欢红酒配香烟。 这样一串描述即为用户画像的典型案例。如果用一句话来描述，即：用户信 ...
分类：
其他好文 时间：
2019-07-30 23:32:48
阅读次数：
291
国内占有率第一的FineBI和国外风生水起的Tableau，这两个”神仙打架”会是怎样的结果呢？本文来给FineBI和Tableau做个全方位的深度比较。 一、FineBI对比Tableau：数据建模、加工 数据建模能力方面，两款产品都支持对数据表进行自由的关联设置，但是Tableau建立的数据模型 ...
分类：
其他好文 时间：
2019-07-14 00:06:33
阅读次数：
149
