序言 众所周知，大多数情况下，业务需要记录的并不是简单的系统时间%date，级别%level，信息%message等字段，而是需要自定义的业务字段。以便后续的数据挖掘和钻取。 逐步研究发现Log4Net记录日志的info,error,debug等方法可以传入object参数：log.info(obj ...
分类：
Web程序 时间：
2020-05-02 22:54:28
阅读次数：
87
TF IDF基础: TF IDF（Term Frequency InversDocument Frequency）是一种常用于信息处理和数据挖掘的加权技术。该技术采用一种统计方法，根据字词的在文本中出现的次数和在整个语料中出现的文档频率来计算一个字词在整个语料中的重要程度。它的优点是能过滤掉一些常见 ...
分类：
其他好文 时间：
2020-04-30 12:01:23
阅读次数：
88
文 / 苏小扬，著有《愿你能做自己，并坦然欢喜》 老李的儿子今年高考，考得不错，可是在填报志愿这个问题上，却不知道怎么办。他们两口子都是做小本生意的人，不懂这些，孩子又没有什么特别的喜好。这不，过两天就要截止报考志愿了，赶紧请了一群亲戚朋友过来帮忙出个主意。 学校是定好了，可是在报什么专业上，大家却 ...
分类：
其他好文 时间：
2020-04-29 18:15:31
阅读次数：
131
前言 努力从今天开始，成功从“零”开始。 一、logging模块是什么？ 是Python内置的标准模块，主要用于输出运行日志 二、日志是什么？ 日志是代码的必要组成部分 记录日志能显示程序当前运行状态 出问题后定位当时问题 对日志记录的数据挖掘进行统计和分析（比如 地区登录APP人数较多等） 三、p ...
分类：
编程语言 时间：
2020-04-29 10:43:42
阅读次数：
73
如果要问最近几年，IT行业哪个技术方向最火?一定属于ABC，即AI + Big Data + Cloud，也就是人工智能、大数据和云计算。 这几年，随着互联网大潮走向低谷，同时传统企业纷纷进行数字化转型，基本各个公司都在考虑如何进一步挖掘数据价值，提高企业的运营效率。在这种趋势下，大数据技术越来越重 ...
分类：
其他好文 时间：
2020-04-28 09:31:30
阅读次数：
279
深度神经网络(DNN，Deep Neural Networks)简介 首先让我们先回想起在之前博客（ "数据挖掘入门系列教程（七点五）之神经网络介绍" ）中介绍的神经网络：为了解决M P模型中无法处理XOR等简单的非线性可分的问题时，我们提出了多层感知机，在输入层和输出层中间添加一层隐含层，这样该网 ...
分类：
其他好文 时间：
2020-04-28 00:28:05
阅读次数：
52
1 背景 用户本地有一份txt或者csv文件，无论是从业务数据库导出、还是其他途径获取，当需要使用蚂蚁的大数据分析工具进行数据加工、挖掘和共创应用的时候，首先要将本地文件上传至ODPS，普通的小文件通过浏览器上传至服务器，做一层中转便可以实现，但当这份文件非常大到了10GB级别，我们就需要思考另一种 ...
分类：
编程语言 时间：
2020-04-27 15:01:34
阅读次数：
90
数据分析是对数据进行详细研究和总结的过程，以便提取有用的信息并形成结论。大数据分析的出发点来自于企业的某些场景需求。根据需求目标，构建分析框架，通过对多个指标和纬度的全方位深入分析，提取企业数据，并利用相应的BI工具实现分析过程，最后提炼结论，通过可视化大屏展示，挖掘问题和提供策略。 1、场景 因为互联网行业的高速发展，数据分析BI工具也开始走入人们的视线，越来越多的企业开始意识到人工智能
分类：
其他好文 时间：
2020-04-26 23:52:49
阅读次数：
222
1.用自己的话描述一下，什么是逻辑回归，与线性回归对比，有什么不同？ 逻辑回归：是一种广义的线性回归分析模型。常用于数据挖掘，疾病自动诊断，经济预测等领域。 线性回归：利用数理统计中回归分析，来确定两种或两种以上变量间相互依赖的定量百关系的一种统计分析方法。常运用于数学、金融、趋势线、经济学等领域。 ...
分类：
其他好文 时间：
2020-04-26 11:23:25
阅读次数：
67
大数据根基于互联网，数据仓库、数据挖掘、云计算等互联网技术的发展为大数据应用奠定基础。对于任何一个大数据的从业者、初接触者，或者都会有个共同的感触：大数据很有用！那么大数据分析平台如何构建成了时下研究的热点。 大数据并不是一场市场炒作。对于许多跨多个垂直的组织而言，大数据是真实存在的，而且它正在改变数据中心的架构。随着数据量、数据处理速度和数据类型的复杂度以远超标准前端和后台处理能力的速度增
分类：
其他好文 时间：
2020-04-25 10:29:03
阅读次数：
85
