1.准备文件 [root@master ~]# cat input.txt hello java hello python hello c hello java hello js hello html hello java [root@master ~]# hadoop fs -mkdir /inp ...
分类：
其他好文 时间：
2018-11-15 00:22:38
阅读次数：
199
运行环境：windows10 64位，虚拟机：Ubuntu Kylin 14.04，Hadoop2.7.1 错误信息： java.io.IOException: Could not locate executable D:\hadoop\bin\winutils.exe in the Hadoop ...
如果利用4线SWD则剩余的调试引脚可以作为IO使用： void JTAG_Set(unsigned char Mode){ u32 temp; temp=Mode; temp<<=25; RCC->APB2ENR|=1<<0; //开启AFIO时钟 AFIO->MAPR&=0XF8FFFFFF; / ...
分类：
其他好文 时间：
2018-11-13 18:32:18
阅读次数：
216
Spring整合JDBC1Spring提供了很多持久层技术模板类ORM持久化技术模板类JDBCorg.springframework.jdbc.core.JdbcTemplateHibernate3.0org.springframework.orm.hibernate3.HibernateTemplateIBatis(MyBatis)org.springframework.orm.ibatis.S
分类：
编程语言 时间：
2018-11-12 20:25:35
阅读次数：
166
1.环境准备 jdk需要1.7以上版本64位. 创建hadoop用户. 在hadoop用户目录下解压安装包hadoop 2.7.2.tar.gz 2.配置免密码登录 各节点分别执行 生成公钥和私钥:ssh keygen t rsa 四次enter. 将公钥添加进公钥库:cat ~/.ssh/id_r ...
分类：
其他好文 时间：
2018-11-06 19:35:44
阅读次数：
308
当你开始编写Apache Spark代码或者浏览公开的API的时候，你会遇到诸如transformation，action，RDD等术语。了解到这些是编写Spark代码的基础。同样，当你任务开始失败或者你需要透过web界面去了解自己的应用为何如此费时的时候，你需要去了解一些新的名词:job, sta ...
分类：
其他好文 时间：
2018-11-02 23:54:28
阅读次数：
219
一、安装Hadoop插件 1. 所需环境 hadoop2.0伪分布式环境平台正常运行 所需压缩包：eclipse-jee-luna-SR2-linux-gtk-x86_64.tar.gz 在Linux环境下运行的eclipse软件压缩包,解压后文件名为eclipse hadoop2x-eclipse ...
分类：
系统相关 时间：
2018-10-31 23:25:21
阅读次数：
339
## MapReduce概述- Google MapReduce的克隆版本- 优点：海量数据的离线处理，易开发，易运行- 缺点：实时流式计算Hadoop MapReduce是一个软件框架，用于轻松编写应用程序，以可靠，容错的方式在大型集群（数千个节点）的商用硬件上并行处理大量数据（多TB数据集） # ...
分类：
其他好文 时间：
2018-10-31 11:21:58
阅读次数：
138
1）基于Redis+MySQL+MongoDB存储架构应用 ...
分类：
其他好文 时间：
2018-10-29 18:25:26
阅读次数：
99
1.MapReduce的核心编程思想 2.yarn集群工作机制 3.maptask并行度与决定机制 4.maptask工作机制 ...
分类：
其他好文 时间：
2018-10-25 23:12:34
阅读次数：
290
