学习机器学习算法，最难的不是算法及公式推导的学习，因为这些很多都是成熟的现成的，有代码例子可以直接使用。最难的是将算法应用到实际的项目当中。 1. 算法概念 K最近邻(k-Nearest Neighbor，KNN)分类算法，是一个理论上比较成熟的方法，也是最简单的机器学习算法之一。该方法的思路是：在 ...
分类：
编程语言 时间：
2020-03-10 12:16:06
阅读次数：
60
HDFS的定义？ Hadoop分布式文件管理系统。旨在对不同系统上的文件进行统一的管理。它是一个文件系统，用于存储文件，通过目录树来定位文件，其次，它是分布式的，由很多服务器联合起来实现其功能，集群中的服务器有各自的角色。 使用场景？ 适合一次写入，多次读出的场景，且不支持文件的修改，适合用来做数据 ...
分类：
其他好文 时间：
2020-03-10 11:56:30
阅读次数：
66
背景：1、ApacheSentry是Cloudera公司发布的一个Hadoop开源组件，它提供了细粒度级、基于角色的授权以及多租户的管理模式，2、Sentry当前可以和Hive/Hcatalog、ApacheSolr和ClouderaImpala集成，为这些组件提供权限管理服务。3、基于角色的管理（role-basedacesscontrol）通过创建角色，将每个组件的权限授予给此角色，然后在用户
分类：
其他好文 时间：
2020-03-09 19:38:28
阅读次数：
72
执行hadoop的相关命令时，总提示如下： ]$ hadoop fs -ls / 2020-03-09 16:09:39,384 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... ...
分类：
其他好文 时间：
2020-03-09 16:21:24
阅读次数：
52
1、访问地址 http://192.168.0.123:8080/dfshealth.html#tab-overview 2、浏览文件 ...
分类：
Web程序 时间：
2020-03-07 12:39:43
阅读次数：
92
一、环境准备 1.添加插件到eclipse plugins目录下就可以了 2.把Window编译后的hadoop的文件放到 hadoop的bin目录下 3.配置环境变量 HADOOP_HOME=E:\hadoop\hadoop-2.7.7 Path=%HADOOP_HOME%\bin;%HADOOP ...
分类：
其他好文 时间：
2020-03-06 17:32:14
阅读次数：
84
简单地说，MapReduce就是"任务的分解与结果的汇总"。 MapReduce 是一个分布式运算程序的编程框架，是用户开发“基于 hadoop 的数据分析 应用”的核心框架。MapReduce采用"分而治之"的思想，把对大规模数据集的操作，分发给一个主节点管理下的各个分节点共同完成，然后通过整合各 ...
分类：
其他好文 时间：
2020-03-06 11:21:35
阅读次数：
60
Ranger是什么ApacheRanger是Hadoop平台上操作、监控、管理数据安全的集中式安全管理框架。Ranger的愿景是在ApacheHadoop生态系统中提供全面的安全性。目前，ApacheRanger支持以下Apache项目的细粒度授权和审计：（1）ApacheHadoop（2）ApacheHive（3）ApacheHBase（4）ApacheStorm（5）ApacheKnox（6）
分类：
其他好文 时间：
2020-03-06 11:11:47
阅读次数：
98
速点链接加入高手战队：http://www.dajiangtai.com/course/112.do唯一由中国人主导的Apache顶级项目Kylin到底是什么ApacheKylin（ExtremeOLAPEngineforBigData）是一个开源的分布式分析引擎，为Hadoop等大型分布式数据平台之上的超大规模数据集提供标准SQL查询及多维分析（OLAP）能力，并提供亚秒级的交互式分析功能。它最
分类：
其他好文 时间：
2020-03-05 19:33:43
阅读次数：
77
先对数据分个类企业数据管理的内容及范畴通常包括交易数据、主数据以及元数据。（1）交易数据：用于纪录业务事件，如客户的订单，投诉记录，客服申请等，它往往用于描述在某一个时间点上业务系统发生的行为。（2）主数据：主数据则定义企业核心业务对象，如客户、产品、地址等，与交易流水信息不同，主数据一旦被记录到数据库中，需要经常对其进行维护，从而确保其时效性和准确性；主数据还包括关系数据，用以描述主数据之间的关
分类：
其他好文 时间：
2020-03-05 19:24:21
阅读次数：
185
