回 到 目 录最近要从网上抓取数据下来，然后hadoop来做存储和分析。每晚尽量更新呆毛王赛高月子酱赛高小唯酱赛高目录 安装hadoop1.0.3 HDFS wordcount mapreduce去重 mapreduce算平均分 mapreduce排序安装hadoop1.0.3 1 u...
分类：
其他好文 时间：
2014-07-14 15:14:34
阅读次数：
279
用gitpull(该命令抓取数据到本地分支后，会自动进行merge操作)抓取远程数据到本地进行分支合并后，出现的一些问题：Q:Xcode无法打开项目S:在解决冲突文件时，对project.pbxproj文件的处理不当引起的，需要仔细鉴别冲突的部分，或者简单的就保留当前分支所属部分，删除合并的分..
分类：
其他好文 时间：
2014-07-13 14:50:50
阅读次数：
208
IP协议详解
上一篇文章文章主要介绍了IP服务的特点,IPv4头部结构IP分片，并用tcpdump抓取数据包，来观察IP数据报传送过程中IP的格式，以及分片的过程。本文主要介绍IP路由，IP转发，重定向和IPv6头部结构。
IP路由
IP协议的一个核心任务是数据报的路由，即决定发送数据报到目标机器的路径。为了理解IP路由过程，我们先简要分析IP模块的基本流程。...
分类：
其他好文 时间：
2014-06-26 14:06:40
阅读次数：
432
Git使用远程仓库的操作讲解：
1）克隆远程仓库
2）添加远程仓库
3）从远程仓库抓取数据
4）远程仓库本地改名
5）删除远程仓库在本地的配置
6）远程分支
7）推送到远程仓库
8）删除远程分支
9）查看仓库信息...
分类：
其他好文 时间：
2014-06-22 20:15:18
阅读次数：
216
蓝牙4.0BLE cc2540 usb-dongle的抓取抓取数据方法 【原创，多图】
(只发布于csdn博客， 如需转载，请注明出处，谢谢！ )
蓝牙4.0的开发， 现在真热火的很， 但是很多朋友买了我们出品的cc2540 usb-dongle后， 都反馈说不知道如何抓包， 并且， 即使很多朋友到TI官网论坛去找信息，不少朋友依然是无功而返，实际上， 用cc...
分类：
其他好文 时间：
2014-06-21 19:57:30
阅读次数：
330
使用python抓取CSDN关注人的所有发不过的文章...
分类：
编程语言 时间：
2014-06-19 09:35:54
阅读次数：
273
前言我们时常会遇到一些 web 项目，需要从不同的数据源中抓取数据来进行分析，而这些数据源是有可能变化的，需要用户来进行动态的维护和添加。可是，大多数的 web 程序使用了应用服务器或者容器中间件来管理数据源的生命周期，因此数据源的变化自然不能够独立于程序，而需要由专业人士去进行维护，必要时还需要重...
分类：
编程语言 时间：
2014-06-18 15:48:11
阅读次数：
400
通过酷6的一个转发接口，使用java正则来获取匹配酷6网大部分视频网址链接，抓取获得ip、flash、title等属性用于内嵌视频展示;关键代码是抓取数据，展示代码很简单。
1.抓取数据代码：
/**
* 酷6新接口方法
* add by yangkai
* @param videoUrl
* @return
*/
prot...
分类：
其他好文 时间：
2014-06-14 10:18:45
阅读次数：
367
我们知道，在WCF中，客户端对服务操作方法的每一次调用，都可以被看作是一条消息，而且，可能我们还会有一个疑问：如何知道客户端与服务器通讯过程中，期间发送和接收的SOAP是什么样子。当然，也有人是通过借助其他工具来抓取数据包来查看。那，有没有办法让程序自己输出相应的SOAP信息呢？要对SOAP消息进行...
分类：
其他好文 时间：
2014-06-12 09:59:00
阅读次数：
285
