数据挖掘第一天，先不说什么 直接上 附上资料列表 可以看出 之后的数据挖掘主要是从数据分析这一块展开的！ 最开始几天 是对EXCEL 的 复习使用！ 文件中附赠的表里面主要是用来训练使用的！ 数据分析; 描述性 探索性 验证性 数据分析的六部曲： 目标明确：先决条件 提供方向 数据收集：数据库 其他 ...
分类：
其他好文 时间：
2017-09-25 22:01:20
阅读次数：
107
恢复内容开始 使用Loadrunner进行性能测试, 可以通过监控系统指标, 来分析系统瓶颈. 我们可以使用两种方法来添加性能指标, 一是使用系统自带性能监控, 二可以使用LoadRunner来实现. 如何使用系统自带的工具来监控性能指标. 1. 找到管理工具-性能监视器 2. 找到数据收集器-用户 ...
分类：
其他好文 时间：
2017-09-22 13:08:21
阅读次数：
178
水氢电池线路评估 v1.1 负责人 侯敬 合伙人 李鑫 员工 高宏，芦晓英 进度看板： 产业链：侯敬 技术要点：高宏 工作机会：芦晓英 简历要点：李鑫 数据收集：高宏，芦晓英，李鑫 数据分析与汇总：侯敬 项目内容： 1.产业链展开方式评估 2.技术要点（技术原理/类似技术的竞争前沿要点） 3.工作机 ...
分类：
其他好文 时间：
2017-09-18 22:17:47
阅读次数：
170
1、为什么是ML策略 例如：识别cat分类器的识别率是90%，怎么进一步提高识别率呢？ 想法： （1）收集更多数据 （2）收集更多的多样性训练样本 （3）使用梯度下降训练更长时间 （4）尝试Adam代替梯度下降 （5）尝试更大的网络 （6）尝试更小的网络 （7）尝试dropout （8）尝试L2正则 ...
分类：
其他好文 时间：
2017-09-09 09:49:34
阅读次数：
214
Oracle自动性能统计 高效诊断性能问题，需要提供完整可用的统计信息，好比医生给病人看病的望闻问切，才能够正确的确诊，然后再开出相应的药方。Oracle数据库为系统、会话以及单独的sql语句生成多种类型的累积统计信息。本文主要描述oracle性能统计涉及到的相关概念及统计对象，以更好的利用统计信息 ...
分类：
数据库 时间：
2017-09-04 20:42:41
阅读次数：
201
JVM内存分为3个区：堆（heap）、栈（stack）、方法区（method） 1.堆（heap）：存储的全部对象，每个对象有个与之对应的class信息。即通过new关键字和构造器创建的对象。JVM只有一个堆被所有线程共享。堆是垃圾收集管理的主要区域。 2.栈（stack）：每个线程包含一个栈区，栈 ...
分类：
其他好文 时间：
2017-09-02 19:00:21
阅读次数：
140
随着业务的不断的增加，使得多台的Tomcat的日志不断剧增，以前有利用bzip2压缩历史数据的脚本压缩过,所以历史日志格式都是统一的，所以打算把部分历史日志数据收集下来，再做具体分析，选选取一台磁盘比较大的服务器用rsync来做日志中心服务器用于收集日志，需要的可以参看：ht..
分类：
其他好文 时间：
2017-08-27 10:08:20
阅读次数：
251
Flume NG概述： Flume NG是一个分布式，高可用，可靠的系统，它能将不同的海量数据收集，移动并存储到一个数据存储系统中。轻量，配置简单，适用于各种日志收集，并支持 Failover和负载均衡。其中Agent包含Source，Channel和 Sink，三者组建了一个Agent。三者的职责 ...
分类：
Web程序 时间：
2017-08-26 17:01:20
阅读次数：
246
第三百五十四节，Python分布式爬虫打造搜索引擎Scrapy精讲—数据收集(Stats Collection) Scrapy提供了方便的收集数据的机制。数据以key/value方式存储，值大多是计数值。 该机制叫做数据收集器(Stats Collector)，可以通过 Crawler API 的属 ...
分类：
编程语言 时间：
2017-08-26 13:44:15
阅读次数：
1239
Apache Flume是一个分布式的、可靠的、高效的日志数据收集组件；我们通常使用Flume将分散在集群中多个Servers的log文件，汇集到中央式的数据平台中，以解决“从离散的日志文件中查看、统计数据困难”的问题。当然，Flume不仅仅可以收集log文件，它也支持比如TCP、UDP等消息数据的 ...
分类：
Web程序 时间：
2017-08-18 20:02:46
阅读次数：
177
