Top NSD ARCHITECTURE DAY05 案例1:安装Hadoop 案例2:安装配置Hadoop 1 案例1:安装Hadoop 1.1 问题 本案例要求安装单机模式Hadoop: 单机模式安装Hadoop 安装JAVA环境 设置环境变量,启动运行 1.2 步骤 实现此案例需要按照如下步骤 ...
分类:
其他好文 时间:
2019-04-28 18:59:08
阅读次数:
198
第1章 大数据概述本章将从故事说起,让大家明白大数据是与我们的生活息息相关的,并不是遥不可及的,还会介绍大数据的特性,以及大数据对我们带来的技术变革,大数据处理过程中涉及到的技术以及大数据典型应用。第2章 初识Hadoop本章节将带领大家认识Hadoop以及Hadoop生态系统、Hadoop的发展史 ...
分类:
其他好文 时间:
2019-03-10 09:33:09
阅读次数:
729
第1章 大数据概述本章将从几则故事说起,让大家明白大数据是与我们的生活息息相关的,并不是遥不可及的,还会介绍大数据的特性,以及大数据对我们带来的技术变革,大数据处理过程中涉及到的技术 1-1 导学1-2 章节安排_1-3 OOTB镜像文件和虚拟机的使用1-4 说两则故事说起1-5 大数据与生活息息相 ...
分类:
其他好文 时间:
2018-11-24 11:35:40
阅读次数:
287
这本书由宋立桓老师和陈建平老师共同合作,本书的切入点明确而清晰,从Hadoop生态明星Cloudera入手,单刀直入逐步引出各类大数据基础和核心应用框架。全书系统介绍了大数据的相关知识,全书共十八章(宋立桓老师撰写第一章到第十二章、陈建平撰写第十三章到第十八章),从大数据概述、Clouderahadoop平台的安装部署、并对大数据hadoop组件分别进行介绍,包括HDFS分布式文件系统、MapRe
分类:
其他好文 时间:
2018-11-15 00:19:59
阅读次数:
154
这本书由宋立桓老师和陈建平老师共同合作,本书的切入点明确而清晰,从Hadoop生态明星Cloudera入手,单刀直入逐步引出各类大数据基础和核心应用框架。全书系统介绍了大数据的相关知识,全书共十八章(宋立桓老师撰写第一章到第十二章、陈建平撰写第十三章到第十八章),从大数据概述、Clouderahadoop平台的安装部署、并对大数据hadoop组件分别进行介绍,包括HDFS分布式文件系统、MapRe
分类:
其他好文 时间:
2018-11-14 21:00:22
阅读次数:
179
大数据概述 题外话(提两个概念) 1. 分布式:以缩短单个任务的执行时间来提高效率的。 2. 集群:集群则是通过提高单位时间内执行的任务数来提高效率。 例如: 如果一个任务由10个子任务组成,每个子任务单独执行需1小时,则在一台服务器上执行改任务需10小时。 采用分布式方案,提供10台服务器,每台服 ...
分类:
其他好文 时间:
2018-09-16 15:52:59
阅读次数:
134
1、 大数据概述 大数据(Big Data)是将规模庞大、结构复杂、动态演变的数据进行采集、筛选、管理、搜索、分析、挖掘与表达的技术统称,是连通信息世界和知识世界的桥梁,也是数据科学(Data Science)的重要研究方向。大数据的概念原本取自以谷歌为代表新一代IT公司利用数据密集型复杂挖掘技术处 ...
分类:
其他好文 时间:
2018-07-02 19:23:27
阅读次数:
230
大数据概述 1、大数据时代 1.第三次信息化浪潮 根据IBM前首席执行官郭士纳的观点,IT领域每隔十五年就会迎来一次重大变革。 2.信息科技为大数据时代提供技术支撑 存储设备容量不断增加 CPU处理能力不断提升 网络带宽不断增加 3.数据产生方式的变革促成大数据时代的来临 运营式系统阶段:数据库 用 ...
分类:
其他好文 时间:
2018-05-15 21:13:08
阅读次数:
843
1.试述大数据对思维方式的重要影响。一、大数据为国内多数经济活动提供参照,提高互联网各个领域的工作效率,对于我国经济发展有重大的推动作用二、由于大数据发挥的重大作用,政府大力支持数据公开,包括天气数据、GPS数据、金融数据、教育数据、交通数据、医疗数据、农业数据等的复杂数据本来并没有任何的商业价值, ...
分类:
其他好文 时间:
2018-03-08 00:16:25
阅读次数:
175
1.试述大数据对思维方式的重要影响。 全样而非抽样:在过去因为数据的存储和处理能力有限制,一般是采用抽样的办法来进行科学分析样本数据和推断全集数据总体特征; 而在现今的大数据时代,通常是采用海量数据的存储和处理的技术来科学分析全集数据,并且快速得到数据分析的结果。 效率而非精确:在过去采用抽样的科学 ...
分类:
其他好文 时间:
2018-03-08 00:10:35
阅读次数:
135