一、Rsync服务介绍 Rsync属于一款实现全量及增量同步数据的软件工具,适用于unix/linux/windows等多种操作系统平台。 Rsync软件能实现本地复制,远程复制,或者远程守护进程方式复制。它以其delta transfer算法闻名,减少通过网络数据发送数量,利用只发送源文件和目标文 ...
分类:
其他好文 时间:
2019-06-29 12:34:39
阅读次数:
135
【导读】数据采集是进行大数据分析的前提也是必要条件,在整个流程中占据重要地位。本文将介绍大数据三种采集形式:系统日志采集法、网络数据采集法以及其他数据采集法。(一)系统日志采集法系统日志是记录系统中硬件、软件和系统问题的信息,同时还可以监视系统中发生的事件。用户可以通过它来检查错误发生的原因,或者寻找受到***时***者留下的痕迹。系统日志包括系统日志、应用程序日志和安全日志。(百度百科)大数据平台或
分类:
其他好文 时间:
2019-06-19 12:02:23
阅读次数:
149
1、配置 (1)在从redis的配置上添加主的地址,配置如 slaveof 192.168.152.128 6379 (2)临时修改主从方式,是在从的连接客户端上执行上述语句。 2、结构分成树形主从和一主多从 3、复制流程 4. 数据同步 redis 2.8版本以上使用psync命令完成同步,过程分 ...
分类:
其他好文 时间:
2019-06-11 19:17:14
阅读次数:
79
1、TCP连接 手机能够使用联网功能是因为手机底层实现了TCP/IP协议,可以使手机终端通过无线网络建立TCP连接。TCP协议可以对上层网络提供接口,使上层网络数据的传输建立在“无差别”的网络之上。 建立起一个TCP连接需要经过“三次握手”: 第一次握手:客户端发送syn包(syn=j)到服务器,并 ...
分类:
Web程序 时间:
2019-06-10 13:36:54
阅读次数:
104
适合爬虫入门的书籍《Python网络数据采集》,采用简洁强大的Python语言,介绍了网络数据采集,并为采集新式网络中的各种数据类型提供了全面的指导。第一部分重点介绍网络数据采集的基本原理:如何用Python从网络服务器请求信息,如何对服务器的响应进行基本处理,以及如何以自动化手段与网站进行交互。第 ...
分类:
编程语言 时间:
2019-06-05 11:24:12
阅读次数:
115
数据包分析基础 数据包分析 数据包嗅探或协议分析:指捕获和解析网络上在线传输数据的过程,为了能更好的了解网络上正在发生的事情。 目的 软件:Tcpdump、Omnipeek、Wireshark 监听网络线路 集线器嗅探方式 流经集线器的所有网络数据包都会被发送到每一个集线器连接的端口。 交换机嗅探方 ...
分类:
其他好文 时间:
2019-06-05 00:27:35
阅读次数:
119
1、数据链路层对数据帧的长度都有一个限制,也就是链路层所能承受的最大数据长度,这个值称为最大传输单元,即MTU。以以太网为例,这个值通常是1500字节。2、对于IP数据包来讲,也有一个长度,在IP包头中,以16位来描述IP包的长度,也就是说,一个IP包,最长可能是65535字节。3、结合以上两个概念 ...
分类:
Web程序 时间:
2019-06-04 16:06:55
阅读次数:
165
什么是负载均衡??负载均衡(LoadBalance)建立在现有网络结构之上,提供了一种廉价有效且透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。负载均衡有两方面的含义:首先,大量的并发访问或数据流量分担到多台节点设备上做并行处理,减少用户等待响应的时间;其次,单个重负载的运算分担到多台节点设备上做并行处理,每个节点设备处理结束后
分类:
其他好文 时间:
2019-06-03 22:00:53
阅读次数:
165
1.volley入门介绍 开发Android应用的时候不可避免地都需要用到网络技术,而多数情况下应用程序都会使用HTTP协议来发送和接收网络数据。Android系统中主要提供了两种方式来进行HTTP通信,HttpURLConnection和HttpClient,几乎在任何项目的代码中我们都能看到这两 ...
分类:
移动开发 时间:
2019-05-27 19:00:15
阅读次数:
165
APM,应用性能监控,有new relic等产品,对APM感兴趣的应该不会不知道它了。主要功能就是统计分析应用的CPU、内存、网络、数据库、UI等性能,并提供错误日志捕获。编码人员需要做的仅仅是使用它提供的插件和jar包,增加一两行代码即可。接下来,本文会以android端的APM为例,分析它到底是 ...
分类:
其他好文 时间:
2019-05-19 20:37:42
阅读次数:
154