码迷,mamicode.com
首页 >  
搜索关键字:运维 沟通    ( 16009个结果
WPF: x名称空间
这个命名空间存放的就是XAML和XAML编译器沟通的东西,比如编译时与那个C#代码合并等 一、 在XAML中出现的方式有三种 1.标签扩展: x:Array, x:Null, x:Static, x:Type 2. XAML指令元素: x:Code, x:XData 3. Attribute: x:...
分类:其他好文   时间:2014-09-12 15:01:23    阅读次数:236
一名资深程序员的自白!
在程序员岗位上工作了三十多年,我学到了也明白了一些事情,希望在这里跟大家一起分享: 看不到实物,客户不会知道自己想要什么 一个功能性原型系统的展示,能够省下无谓低效的赘述。 只要给予足够的时间,任何安全措施都不安全 安全是目前系统运维的重大挑战,我们每时每刻都想方设法来保护系统和数据,但是黑客只要成功一次,我们所有努力就极有可能都付诸东流。 系统被攻破后造成的影响,依...
分类:其他好文   时间:2014-09-12 11:58:33    阅读次数:196
运维系列:08、Spark Shell
./bin/spark-shell --master spark://MASTER:PORT启动集群模式:MASTER=spark://`hostname`:7077 bin/spark-shellbin/spark-shell --master spark://es122:7077单机模式:bin...
分类:其他好文   时间:2014-09-12 11:52:33    阅读次数:183
运维系列:02、Spark的部署方式
单机运行Standalone使用Spark本身提供的资源管理器,可以直接运行Yarn提供运行spark应用的jar包Mesos另一种资源管理系统Amazon EC2 / ElasticMapReduce安装工具:Chef
分类:其他好文   时间:2014-09-12 11:41:33    阅读次数:156
运维系列:05、Spark on Yarn
Spark 0.6.0开始支持此功能准备:运行Spark-on-YARN需要Spark的二进制发布包。参考编译配置:环境变量:SPARK_YARN_USER_ENV 用户可以在这个参数中设置Spark on YARN的环境变量,可以省略。 例如:SPARK_YARN_USER_ENV="JAVA_H...
分类:其他好文   时间:2014-09-12 11:38:33    阅读次数:222
运维系列:06、Spark调优
1、垃圾回收在conf/spark-env.sh中添加SPARK_JAVA_OPTS=-verberos:gc -XX;+PrintGCDetails -XX:+PrintGCTimeStamps如果发现集群耗费过多时间在垃圾回收上,可以通过spark.storage.memoryFaction调低...
分类:其他好文   时间:2014-09-12 11:35:43    阅读次数:234
运维系列:04、Spark Standalone运行
安装配置hosts配置: 用户: useradd spark1、SSH无密码登录2、JDK3、安装Scala 2.10.44、安装配置Spark4.1、解压与权限 chown -R spark:spark /opt/spark4.2、配置workervi conf/slavesES122ES123E...
分类:其他好文   时间:2014-09-12 11:35:33    阅读次数:197
运维系列:01、Spark编译与打包
1、SBT编译vi project/SparkBuild.scala修改仓库:"Maven Repository" at "http://172.16.219.120:8080/nexus/content/groups/public/"SPARK_HADOOP_VERSION=2.4.0.2.1.....
分类:其他好文   时间:2014-09-12 11:29:43    阅读次数:234
运维系列:07、spark-submit
bin/spark-submit --helpUsage: spark-submit [options] [app options]Options:--master MASTER_URL spark://host:port, mesos://host:port, yarn, or local. -....
分类:其他好文   时间:2014-09-12 11:29:13    阅读次数:175
运维人员的解放----Docker快速部署
Docker是一个用了一种新颖方式实现的超轻量虚拟机,在实现的原理和应用上还是和VM有巨大差别,专业的叫法是应用容器(ApplicationContainer)。(我个人还是喜欢称虚拟机)Docker应用容器相对于VM有以下几个优点:启动速度快,容器通常在一秒内可以启动,而VM通常要更久资源利..
分类:其他好文   时间:2014-09-12 02:33:03    阅读次数:212
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!