新建了一个ubuntu虚拟机开发环境，在ubuntu机器上实现了远程提交topology，但还是无法解决topology本地模式运行的问题， 在windows上也实现了远程提交topology，也是无法解决topology本地模式运行的问题， 要实现远程提交topology，首先要在本地机器安装st ...
分类：
其他好文 时间：
2017-04-22 00:20:39
阅读次数：
214
hadoop的程序运行有, 具体有3种, 除了上一篇(http://www.cnblogs.com/wenbronk/p/6662119.html)提过的直接发布jar上传到hadoop以外, 还有本地运行和真实服务器运行两种方式 1, 本地模式 1.1 解压hadoop.tar.gz到window ...
分类：
其他好文 时间：
2017-04-05 01:18:07
阅读次数：
137
不多说，直接上干货！ IntelliJ IDEA号称当前Java开发效率最高的IDE工具。IntelliJ IDEA有两个版本：社区版(Community)和旗舰版(Ultimate)。社区版时免费的、开源的，但功能较少，旗舰版提供了较多的功能，是收费的，可以试用30天。 强烈推荐，新手刚入门，可以 ...
分类：
其他好文 时间：
2017-03-05 00:40:59
阅读次数：
630
Hadoop部署方式
本地模式
伪分布模式(在一台机器中模拟，让所有进程在一台机器上运行)
集群模式 服务器只是一堆废铁而已，上面跑了tomcat，我们叫它web服务器；上面跑了mysql，我们叫它...
分类：
其他好文 时间：
2017-02-09 16:15:32
阅读次数：
126
系统支持：CentOS 6.3 部署资源：JDK1.7、Hadoop-2.2.0 hostname:reagina01 ipaddress:192.168.8.201 java version "1.7.0_80" 安装Hadoop： [root@reagina01 ~]# mkdir /reagi ...
分类：
其他好文 时间：
2017-02-04 21:13:50
阅读次数：
360
在Hadoop集群里，有三种模式: 1、本地模式 2、伪分布模式 3、全分布模式 在Spark集群里，有四种模式： 1、local单机模式 结果xshell可见： ./bin/spark-submit --class org.apache.spark.examples.SparkPi --maste ...
分类：
其他好文 时间：
2016-11-23 10:10:39
阅读次数：
335
项目中需要将本地文件拷贝到hdfs上，由于本人比较懒，于是使用擅长的Java程序通过Hadoop.FileSystem.CopyFromLocalFile方法来实现。 在本地(Window 7 环境)本地模式下运行却遇到了下述异常： 通过分析异常堆栈可知， 通过代码可知，这个方法是hadoop不支持 ...
分类：
其他好文 时间：
2016-11-13 17:00:17
阅读次数：
254
1、git 安装好后，如何配置？ a: 设置本地用户名、邮箱，很重要！之后的每次提交都会用到这两条信息，说明是谁提交了更新。 这是设置全局的用户名、邮箱。当然如果你要在某个项目单独修改也可以，不加 --global 再在项目单独设置一次就好。 b: 生成ssh 公钥 然后根据提示连续回车即可在~/. ...
分类：
其他好文 时间：
2016-11-02 21:02:32
阅读次数：
142
我们知道，对于开发而言，IDE是有很多个选择的版本。如我们大部分人经常用的是如下。 Eclipse *版本 Eclipse *下载 而我们知道，对于spark的scala开发啊，有为其专门设计的eclipse，Scala IDE for Eclipse Scala IDE for Eclipse的下 ...
分类：
其他好文 时间：
2016-09-18 12:00:54
阅读次数：
674
智能问答应当是未来智能化发展中人机交互的主要方式，目前无论是在开源社区或者企业应用中，都有广泛的应用。 项目名称是Iveely.Brain，本次源码可以在Github的这里下载，,是主要用于聊天服务的一个项目，本次开源版本的示例如下所示： 整个开源版本分为两种模式：本地模式和远程模式。本地模式是开发 ...
分类：
其他好文 时间：
2016-09-18 10:21:44
阅读次数：
1875
