1.首先将运行在本地上的 zookeeper 给停止掉 2.到/opt/softwares 目录下 将 zookeeper解压到 /opt/app 目录下 命令: tar -zxvf zookeeper-3.4.5.tar.gz -C /opt/app/ 3.修改配置文件 将文件 zoo_sampl ...
分类：
其他好文 时间：
2018-09-30 14:52:22
阅读次数：
174
What is Zookeeper 是一个开源的分布式的，为分布式应用提供协作服务的Apache项目 提供一个简单的原语集合，以便与分布式应用可以在他之上构建更高层次的同步服务 设计非常简单易于编程，他使用的是类似于文件系统那样的树形数据结构。 目的就是将分布式服务不再需要有协作冲突而另外实现协作服 ...
分类：
其他好文 时间：
2018-09-30 12:42:50
阅读次数：
194
1.对 hadoop 进行格式化 到 /opt/app/hadoop-2.5.0 目录下 执行命令： bin/hdfs namenode -format 执行的效果图如下 ( 下图成功 格式化 不要没事格式化 ) 2.启动dfs 执行命令(在 /opt/app/hadoop-2.5.0/目录下): ...
分类：
其他好文 时间：
2018-09-29 22:04:57
阅读次数：
175
******************* 一定要使这三台机器的用户名相同，安装目录相同 ************* SSH 无密钥登录的简单介绍（之前再搭建本地伪分布式的时候，就生成了，现在这三台机器的公钥私钥都是一样的，所以下面这个不用配置） 单机操作： 生成密钥：命令 ssh-keygen -t ...
分类：
其他好文 时间：
2018-09-29 21:36:07
阅读次数：
229
一：分布式架构和部署 1：如何进行分布式部署2：系统拆分后，模块之间如何相互调用3：如何进行统一的会话(Session)管理4：如何实现单点登录5：如何保证一致性更新6：如何规划和处理分布式事务7：如何对重要服务实现HA二：高并发和Web层的性能优化1：高并发的处理2：Nginx的优化，Varnis ...
分类：
其他好文 时间：
2018-09-27 13:05:06
阅读次数：
180
让TensorFlow们飞一会儿 前一篇文章说过了TensorFlow单机多卡情况下的分布式部署，毕竟，一台机器势单力薄，想叫兄弟们一起来算神经网络怎么办？我们这次来介绍一下多机多卡的分布式部署。 其实多机多卡分布式部署在我看来相较于单机多卡分布式更容易一些，因为一台机器下需要考虑我需要把给每个de ...
分类：
其他好文 时间：
2018-09-19 16:28:03
阅读次数：
176
让TensorFlow飞一会儿 面对大型的深度神经网络训练工程，训练的时间非常重要。训练的时间长短依赖于计算处理器也就是GPU，然而单个GPU的计算能力有限，利用多个GPU进行分布式部署，同时完成一个训练任务是一个很好的办法。对于caffe来说，由于NCCL的存在，可以直接在slover中指定使用的 ...
分类：
其他好文 时间：
2018-09-19 16:21:26
阅读次数：
341
摘要：今年夏天，俄罗斯世界杯召开。在刚刚落幕的重庆云栖飞天技术汇专场中，阿里视频云技术专家裘良科，就世界杯这个话题，跟参会嘉宾一起探讨了千万级直播高稳定的挑战和相关实践，本文为演讲全文。2018年俄罗斯世界杯从6月14日到7月15日，跨度整整一个月，共有64场比赛，优酷成为央视指定的世界杯新媒体官方合作伙伴，作为优酷的同门兄弟，阿里云也一并为世界杯直播的提供技术支持，一同征战世界杯。今年夏天，俄罗
分类：
其他好文 时间：
2018-09-17 15:25:17
阅读次数：
202
1. MxNet 分布式介绍 2. 分布式部署方法 2.1 Step1. 搭建MxNet环境 2.2 Step2. 设置SSH免密码登录 2.3 Step3. 搭建分布式的环境 ...
分类：
Web程序 时间：
2018-09-09 00:37:05
阅读次数：
331
大多数互联网系统都是分布式部署的，分布式部署确实能带来性能和效率上的提升，但为此，我们就需要多解决一个分布式环境下，数据一致性的问题。 当某个资源在多系统之间，具有共享性的时候，为了保证大家访问这个资源数据是一致的，那么就必须要求在同一时刻只能被一个客户端处理，不能并发的执行，否者就会出现同一时刻有 ...
分类：
其他好文 时间：
2018-09-03 17:19:44
阅读次数：
150
