码迷,mamicode.com
首页 >  
搜索关键字:streaming 数据清理    ( 1344个结果
Live555 Streaming from a live source
https://www.mail-archive.com/live-devel@lists.live555.com/msg05506.html-----ask--------------------------------Hi, We are trying to stream from a live...
分类:其他好文   时间:2015-04-20 01:42:21    阅读次数:756
(转)RTSP - RTP over TCP
Normally, RTSP provide streaming over UDP. By nature, UDP is a better choice as it provides robust streaming capability for media. However, it is unli...
分类:其他好文   时间:2015-04-18 23:45:23    阅读次数:400
新浪微博爬取笔记(3):wap端爬取用户微博列表 ,转发列表+数据清理
wap端登陆成功后,就可以安心开始爬取数据了。我这次需要的数据是:(1)用户的近期1000条微博,需要:微博id,转发量,发布时间(2)某条微博的转发列表,需要:转发人,转发时间(3)某个用户的关注数,粉丝数,微博数,最近100条微博的平均转发量===========================...
分类:其他好文   时间:2015-04-18 19:02:37    阅读次数:175
python执行mapreduce
执行mapreduce有两种方式,一种是原生Java写的mr,一种是直接使用Streaming方式,这种方式是在Java上面做了一个封装,可以通过其它语言调用Java原生的mr接口。 优点 可以使用自己喜欢的语言来编写MapReduce程序(换句话说,不必写Java XD)不需要像写Java的MR程序那样import一大堆库,在代码里做一大堆配置,很多东西都抽象到了stdio上,代...
分类:编程语言   时间:2015-04-16 15:50:51    阅读次数:146
Darwin Streaming Server源码分析
2? ???Darwin流化服务器介绍 DSS源代码完全采用标准C++语言写成,编程风格非常优秀,每个C++类都对应着一对和类同名的.h/.cpp文件。但是由于大量采用了面向对象的概念,如继承、多态等等;而且源文件和类相当...
分类:Windows程序   时间:2015-04-15 15:10:54    阅读次数:288
Darwin Streaming Server 核心代码分析
基本概念 首先,我针对的代码是Darwin Streaming Server 6.0.3未经任何改动的版本。 Darwin Streaming Server从设计模式上看,采用了Reactor的并发服务器设计模式,如果对Reactor有一定的了解会有助于对Darwin St...
分类:Windows程序   时间:2015-04-15 11:39:34    阅读次数:177
spark-kafka: 错误解决1
INFO BlockManagerMaster: Registered BlockManagerException in thread "main" java.lang.NoClassDefFoundError: org/apache/spark/streaming/kafka/KafkaUtils...
分类:其他好文   时间:2015-04-13 18:12:53    阅读次数:252
OGG之Replicate进程
Replicate操作的过程如下:1、读取源端传输过来的trail文件;执行data数据过滤和转换操作(如果配置了);2、DML操作:根据commit顺序,构造LCR; DDL操作:Replicate进程直接apply;3、Replicate通过lightweight streaming接口与目标....
分类:系统相关   时间:2015-04-11 22:25:59    阅读次数:730
The Design of HDFS
HDFS is a filesystem designed for storing very large files with streaming data access patterns, running on clusters of commodity hardware. Let’s examine this statement?in more detail:? Very lar...
分类:其他好文   时间:2015-04-08 06:49:45    阅读次数:128
《Hadoop权威指南》笔记 第二章 Hadoop Streaming
什么是Hadoop Streaming Hadoop提供的一个编程工具,允许用户使用任何可执行文件或脚本作为mapper和Reducer 一个例子(shell简洁版本) $HADOOP_HOME/bin/hadoop jar $HADOOP_HOME/contrib/streaming/hadoop...
分类:其他好文   时间:2015-04-05 11:51:12    阅读次数:146
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!