spark集群部署好之后，运行start-all.sh，可以成功运行，但是运行shell出错，显示超时 由于netty是spark通信框架，通信超时所以产生问题。 解决方法：1.ip6可能是一个可能原因，把：：1也就是ip6先注释掉试试（不行） 2.设置下超时时间（靠谱）：SparkConf: co ...
分类：
其他好文 时间：
2017-08-23 20:48:21
阅读次数：
242
目录 · Linux网络IO模型 · 文件描述符 · 阻塞IO模型 · 非阻塞IO模型 · IO复用模型 · 信号驱动IO模型 · 异步IO模型 · BIO编程 · 伪异步IO编程 · NIO编程 · Buffer和Channel · 深入Buffer · Selector · AIO编程 · 四种 ...
分类：
Web程序 时间：
2017-08-21 09:43:38
阅读次数：
353
最近在看Netty框架，顺便写了一下NIO SocketChannel服务端和客户端 Server.java Client.java 整个套路和Socket、ServerSocket套路是一样的，这是阻塞形式的。NIO可以设置为非阻塞，这需要配合使用Selector。这种就和Socket、Serve ...
分类：
移动开发 时间：
2017-08-20 00:42:14
阅读次数：
186
Storm后来用Netty来代替了zmq，这个能够參考一下两篇blog 这两篇blog具体的阐述原因以及一些性能測试， 大家參考一下 Reference 1、Netty 4 Reduces GC Overhead by 5x at Twitter 2、Making Storm fly with Ne ...
分类：
Web程序 时间：
2017-08-19 21:18:21
阅读次数：
134
Storm 0.9.2安装指南0 Storm0.9的亮点引用网上的描写叙述：“Storm 0.9.0.1版本号的第一亮点是引入了netty transport。Storm网络传输机制实现可插拔形式，当前包括两种方式：原来的0mq传输，以及新的netty实现。在早期版本号中（0.9.x之前的版本号）， ...
分类：
其他好文 时间：
2017-08-14 19:59:56
阅读次数：
136
一、storm计算框架 ：性能优化的第一步就是找到瓶颈在哪里，从瓶颈处入手，解决关键点问题，事半功倍。 除了通过系统命令查看CPU使用，jstack查看堆栈的调用情况以外，还可以通过Storm自身提供的信息来对性能做出相应的判断。 在Storm 的UI中，对运行的topology提供了相应的统计信息 ...
分类：
其他好文 时间：
2017-08-14 16:39:12
阅读次数：
633
高并发：1 使用生成静态页面 新东网首页生成 2 使用缓存 redis 3 使用dubbo zookeeper: 1. **保证事务顺序一致性**。 如果事务A在一台服务器上优先于事务B先执行，则在所有的服务器上事务A都将优先于事务B执行。由于网络是不可靠的，如果没有ZooKeeper如何保证在所有 ...
分类：
Web程序 时间：
2017-08-13 15:17:11
阅读次数：
488
课程目录及下载地址： 1、第一课NIO2、第二课netty服务端3、第三课netty客户端4、第四课netty线程模型源码分析(一)5、第五课netty线程模型源码分析(二)6、第六课netty5案例学习7、第七课netty学习之心跳8、第八课protocol buff学习9.第九课自定义序列化协议 ...
分类：
Web程序 时间：
2017-08-13 15:14:17
阅读次数：
160
转载请注明出处：jiq?钦's technical Blog - 季义钦引言BIO和NIO是两种不同的网络通信模型，现现在NIO已经大量应用在Jetty、ZooKeeper、Netty等开源框架中。一个面向流、一个面向缓冲区一个是堵塞式的、一个非堵塞一个没有io多路复用器、一个有以下通过一个样例解释 ...
分类：
编程语言 时间：
2017-08-11 14:44:03
阅读次数：
1077
