Tengine 是OPEN AI LAB 为嵌入式设备开发的一个轻量级、高性能并且模块化的引擎。基于ARM平台高效的计算库实现，针对特定硬件平台的性能优化，吸取已有AI计算框架的优点，设计全新的计算图表示。 ARM专用AI引擎 Tengine支持了Firefly平台，可以轻松搭建AI计算框架，性能大 ...
分类：
其他好文 时间：
2018-08-14 14:35:38
阅读次数：
410
之前我们介绍了HBase，并且实战了如何通过HBase+SpringBoot实战分布式文件存储，我们为什么要使用HBase来实现文件存储呢，究其原因还是因为HDFS本身具有一定的局限性。而且大多数的公司在使用Hadoop的时候一般只用到了它的MR部分(分布式计算框架)，对于HDFS这个文件存储服务的 ...
分类：
其他好文 时间：
2018-08-07 18:54:10
阅读次数：
177
1.1 MapReduce 是什么 MapReduce 是一种分布式的离线计算框架，是一种编程模型，用于大规模数据集(大于 1TB)的并行运算。将自己的程序运行在分布式系统上。概念是："Map(映射)"和"Reduce(归约)"。 指定一个 Map( 映射) ) 函数，用来把一组键值对映射成一组新的 ...
分类：
其他好文 时间：
2018-08-01 12:07:48
阅读次数：
148
Hadoop分布式集群环境搭建是每个入门级新手都非常头疼的事情，因为你可能花费了很久的时间在搭建运行环境，最终却不知道什么原因无法创建成功。但对新手来说，运行环境搭建不成功的概率还蛮高的。
分类：
其他好文 时间：
2018-07-26 11:34:55
阅读次数：
203
什么是大数据 所谓大数据，是指数据量庞大、产生数度快、结构多样的价值密度低的数据。其中，数据量庞大是指数据规模超出1、2台高性能主机所能处理范围；结构多样性是指除了关系型数据库能够处理的结构化数据还包含半结构化数据（如各类传感设备必如地镑、卫星、GPS设备等产生的纯文本格式的数据，还有良心网站NAS ...
分类：
其他好文 时间：
2018-07-25 20:44:02
阅读次数：
224
理解Hadoop2.7.4集群搭建组件： HDFS 海量数据的分布式存储 Map-Reduce 海量数据的分布式计算框架 Yarn 海量数据的资源管理 两个集群 逻辑上分离，物理上常在一起 1、Hdfs 集群 三个角色：Namenode，Datanod，Secondnode 2、Yarn集群 两个 ...
分类：
其他好文 时间：
2018-07-24 17:35:29
阅读次数：
174
一、Parquet的组成 Parquet仅仅是一种存储格式，它是语言、平台无关的，并且不需要和任何一种数据处理框架绑定，目前能够和Parquet适配的组件包括下面这些，可以看出基本上通常使用的查询引擎和计算框架都已适配，并且可以很方便的将其它序列化工具生成的数据转换成Parquet格式。 查询引擎: ...
分类：
其他好文 时间：
2018-07-18 23:13:28
阅读次数：
212
目录： 目录见文章1 这个案列完成对单词的计数，重写map,与reduce方法，完成对mapreduce的理解。 Mapreduce初析 Mapreduce是一个计算框架，既然是做计算的框架，那么表现形式就是有个输入（input），mapreduce操作这个输入（input），通过本身定义好的计算模 ...
分类：
其他好文 时间：
2018-07-17 16:25:06
阅读次数：
179
大数据是做什么的?大数据–随着计算机技术的发展,互联网的普及,信息的积累已经到了一个非常庞大的地步,信息的增长也在丌断的加快,随着互联网、物联网建设的加快,信息更是爆炸是增长,收集、检索、统计这些信息越发困难,必须使用新的技术来解决这些问题什么是大数据?大数据的定义–大数据由巨型数据集组成,这些数据集大小常超出人类在可接受时间下的收集、庋用、管理和处理能力。?大数据能做什么?–把数据集合幵后进行分
分类：
系统相关 时间：
2018-07-07 20:25:01
阅读次数：
189
Python3.7 源码下载： https://www.python.org/downloads/release/python-370/ ...
分类：
编程语言 时间：
2018-07-06 17:57:38
阅读次数：
154
