3.1 数据本地化 SQL On Hadoop 设计的一个基本原则是：将计算任务移动到数据所在的节点而不是反过来。这主要出于网络优化的目的，因为数据分布在不同的节点，如果移动数据那么将会产生大量的低效的网络数据传输。数据本地化一般分为三种：节点局部性 (Node Locality), 机架局部性 ( ...
分类：
移动开发 时间：
2017-11-08 15:09:03
阅读次数：
213
1、配置文件 ES的配置文件位置：config/elasticsearch.yml可以直接搜索elasticsearch.yml 2、配置远程api访问 配置修改完之后，重新启动，可以通过以下命令测试 这样我们就可以在远程通过restful api访问相关数据 3、分布式配置 其他一些简单的名称、路 ...
分类：
其他好文 时间：
2017-11-06 17:56:05
阅读次数：
107
1 复制概述 Mysql内建的复制功能是构建大型，高性能应用程序的基础。将Mysql的数据分布到多个系统上去，这种分布的机制，是通过将Mysql的某一台主机的数据复制到其它主机（slaves）上，并重新执行一遍来实现的。复制过程中一个服务器充当主服务器，而一个或多个其它服务器充当从服务器。主服务器将 ...
分类：
数据库 时间：
2017-11-02 18:08:29
阅读次数：
217
在机器学习中，我们通常要考虑的一个问题是如何的“以偏概全”，也就是以有限的样本或者结构去尽可能的逼近全局的分布。这就要在样本以及结构模型上下一些工夫。在一般的训练任务中，考虑的关键问题之一就是数据分布是否合理：首先是数据集的覆盖度，也就是数据集是否能够覆盖样本空间；其次还要尽可能的保证具有和真实数据 ...
分类：
编程语言 时间：
2017-10-28 18:58:02
阅读次数：
177
首先解释一个概念，统计信息是什么： 简单说就是对某些字段数据分布的一种描述，让SQL Server大概知道预期的数据大小，从而指导生成合理执行计划的一种数据库对象 默认情况下统计信息的更新策略： 1，表数据从0行变为1行 2，少于500行的表增加500行或者更多 3，当表中行多于500行时，数据的变 ...
分类：
数据库 时间：
2017-10-27 18:08:43
阅读次数：
166
转载：http://www.cnblogs.com/LBSer/p/4440590.html 机器学习模型被互联网行业广泛应用，一般做机器学习应用的时候大部分时间是花费在特征处理上，其中很关键的一步就是对特征数据进行归一化，为什么要归一化呢？维基百科给出的解释：1）归一化后加快了梯度下降求最优解的速 ...
分类：
编程语言 时间：
2017-10-27 13:41:45
阅读次数：
714
Spark特点： 1.分布式 spark读取数据时是把数据分布式存储到各个节点内存中 2.主要基于内存（少数情况基于磁盘，如shuffle阶段） 3.迭代式计算 ...
分类：
其他好文 时间：
2017-10-21 10:58:00
阅读次数：
260
给大家分享下有关MySQL在数据安全的话题，怎么通过一些配置来保证数据安全以及保证数据的存储落地是安全的。 我是在2014年加入陌陌，2015年加入去哪儿网，做MySQL的运维，包括自动化的开发。 接下来我将从四个方面给大家介绍一下，数据库怎么通过一些配置做到数据安全的。 单机安全 集群安全 备份安 ...
分类：
数据库 时间：
2017-10-18 10:08:24
阅读次数：
242
Mysql主从复制原理及配置输入的命令蓝色字体:注释黄色背景:重要小标题:蓝底白字1.复制概述Mysql内建的复制功能是构建大型，高性能应用程序的基矗将Mysql的数据分布到多个系统上去，这种分布的机制，是通过将Mysql的某一台主机的数据复制到其它主机（slaves）上，并重新执行一遍..
分类：
其他好文 时间：
2017-10-11 00:53:47
阅读次数：
185
Mysql主从复制原理及配置 1.复制概述 Mysql内建的复制功能是构建大型，高性能应用程序的基础。将Mysql的数据分布到多个系统上去，这种分布的机制，是通过将Mysql的某一台主机的数据复制到其它主机（slaves）上，并重新执行一遍来实现的。复制过程中一个服务器充当主服务器，而一个或多个其它 ...
分类：
数据库 时间：
2017-10-10 19:01:55
阅读次数：
243
