本文不会搞什么Yarn混搭Spark,只想建立一个纯粹的Spark环境,太多层东西搅和在一起,不靠谱。创建spark服务运行帐号# useradd smilesmile帐号就是spark服务的运行帐号。下载安装包在root帐号下,下载最新安装包,注意不是source,而是bin安装包,支持hadoop2.6以后的wget http://mirrors.cnnic.cn/apache/spark/s...
分类:
其他好文 时间:
2015-11-11 16:48:52
阅读次数:
787
Driver与Executor间的消息传递
class DriverEndpoint(override val rpcEnv: RpcEnv, sparkProperties: Seq[(String, String)])
extends ThreadSafeRpcEndpoint with Logging {
//省略非关键代码
override def rece...
分类:
其他好文 时间:
2015-11-06 00:23:27
阅读次数:
450
jQuery 目前用的最广泛,但是其体积过大(100K 以上),在移动端网络带宽有限的情况下,并不是最优选择,如果你的页面没有其他地方需要用到 jQuery,jQuery 仅仅用于 highcharts,这种情况可以考虑使用Highcharts Standalone Framework,Highch...
分类:
其他好文 时间:
2015-11-03 19:39:38
阅读次数:
205
修改http服务端口找到 jboss-as-7.1.1.Final/standalone/configuration/standalone.xml文件,找到第298行,如下图:如果我们想改成80端口,显然只需要将 port="8080" 改为 port="80" 并重启JBoss即可。
分类:
Web程序 时间:
2015-10-30 16:45:31
阅读次数:
166
Task执行在上一节中,我们提到在Driver端CoarseGrainedSchedulerBackend中的launchTasks方法向Worker节点中的Executor发送启动任务命令,该命令的接收者是CoarseGrainedExecutorBackend(Standalone模式),类定义源码如下:private[spark] class CoarseGrainedExecutorBack...
分类:
其他好文 时间:
2015-10-29 00:49:13
阅读次数:
243
一、Tomcat是什么Tomcat是Apache在符合J2EE的JSP、Servlet标准下开发的一个JSP服务器,tomcat侧重于servlet引擎,如果以standalone方式运行,可以作为web服务器来使用,支持JSP;tomcat是由java语言开发的,需要在java虚拟机上进行工作。二、Tomcat的常见的组件服务器:ServerT..
分类:
其他好文 时间:
2015-10-28 15:48:29
阅读次数:
295
1、selenium-java-2.45.0.jar2、selenium-java-2.45.0-srcs.jar3、selenium-server-standalone-2.45.0.jar说明:Selenium Server是指使用jdk来运行这个selenium-server-standalo...
分类:
编程语言 时间:
2015-10-26 15:32:58
阅读次数:
178
尝试给公司的网站写每日例行检查的脚本时,不需要去打开浏览器,这是就用到HTMLUNIT的使用HTMLUNIT是基于Selenium服务端的,所以需要selenium-server-standalone-XXX.jar1、下载安装java ,为了运行jar包2、下载selenium-server-st...
分类:
编程语言 时间:
2015-10-24 18:35:50
阅读次数:
278
1.起动mysqldmysqld --explicit_defaults_for_timestamp --debug --standalone --console(不作为服务运行)mysqld --explicit_defaults_for_timestamp --debugmysqld --con...
分类:
数据库 时间:
2015-10-13 00:14:51
阅读次数:
253
每当chrome有更新之后,都有不少用户想要下载离线版的安装文件,但苦于找不到下载地址而发愁,其实这个问题很简单,下面我来分享一下方法(仅针对Windows操作系统):对于稳定版(正式版)Chrome来说,只需要在Chrome的“最终用户许可协议”页面链接后面添加”?standalone=1″即可,...
分类:
其他好文 时间:
2015-10-12 22:27:25
阅读次数:
186