走上大数据的自学之路....，Hadoop是走上大数据开发学习之路的第一个门槛。 Hadoop，是Apache的一个开源项目，开发人员可以在不了解分布式底层细节，开发分布式程序，充分利用集群进行高速运算和存储海量数据。 核心：分布式存储系统HDFS（Hadoop Distributed File S ...
分类：
其他好文 时间：
2018-09-17 10:24:47
阅读次数：
119
Hadoop Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。 HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（high throughput）来访问应用程序的数据，适合那些有着超大 ...
分类：
其他好文 时间：
2018-09-15 20:50:17
阅读次数：
170
初识RDD 什么是RDD？ 定义:Resilient distributed datasets (RDD), an efficient, general-purpose and fault-tolerant abstraction for sharing data in cluster applic ...
分类：
其他好文 时间：
2018-09-13 17:30:39
阅读次数：
174
除了redis,还可以使用另外一个神器 Celery。Celery是一个异步任务的调度工具。 Celery是Distributed Task Queue，分布式任务队列，分布式决定了可以有多个worker的存在，列表表示其是异步操作，即存在一个产生任务提出需求的工头，和一群等着被分配工作的码农。 在 ...
分类：
其他好文 时间：
2018-09-13 17:25:43
阅读次数：
231
分布式（Distributed）数据访问层（Data Access Layer），简称DAL，是利用MySQL Proxy、Memcached、集群等技术优点而构建的一个架构系统。主要目的是解决高并发、大数据流操作遇到的和数据访问有关的问题，例如怎么进行切库分表，怎样能够更好的防止服务单点故障等等。 ...
分类：
其他好文 时间：
2018-09-12 22:59:15
阅读次数：
257
Todo list: 1. Distributed TensorFlow简介 2. Distributed TensorFlow的部署与运行 3. 对3个台主机做多卡GPU和两台主机做多卡GPU的结果作对比 ...
分类：
其他好文 时间：
2018-09-12 17:59:27
阅读次数：
167
HDFS(Hadoop Distributed FileSystem), 是一种被设计成适合运行在通用硬件上的分布式文件系统。HDFS是一个高度容错性的系统，适合部署在廉价的 机器上。它能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。 一、特点及限制 HDFS以流式数据访问模式来存储超大文件 ...
分类：
其他好文 时间：
2018-09-10 00:52:19
阅读次数：
229
官网：http://hadoop.apache.org/ The Apache? Hadoop® project develops open-source software for reliable, scalable, distributed computing. The Apache Hadoo ...
分类：
其他好文 时间：
2018-09-09 11:57:26
阅读次数：
198
作者：gqk 1，Hadoop的前世今生： 2，hadoop是什么： Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS，Hadoop的框架最核心的设计就是：HDFS和MapReduce。HDFS为海量的数据提供了存储，则MapRedu ...
分类：
其他好文 时间：
2018-09-05 17:47:59
阅读次数：
146
https://math.stackexchange.com/questions/1307287/random-uniformly-distributed-points-in-a-circle http://mathworld.wolfram.com/topics/ComputationalGeom ...
分类：
其他好文 时间：
2018-09-03 19:33:46
阅读次数：
171
