码迷,mamicode.com
首页 >  
搜索关键字:streaming    ( 1219个结果
Wowza 相关
下载: 1. https://www.wowza.com/pricing/installer 安装: https://www.wowza.com/docs/how-to-install-and-configure-wowza-streaming-engine 修改web端口: http://50.1 ...
分类:其他好文   时间:2018-07-09 16:31:59    阅读次数:185
Kafka:ZK+Kafka+Spark Streaming集群环境搭建(十三)kafka+spark streaming打包好的程序提交时提示虚拟内存不足(Container is running beyond virtual memory limits. Current usage: 119.5 MB of 1 GB physical memory used; 2.2 GB of 2.1 G)
异常问题:Container is running beyond virtual memory limits. Current usage: 119.5 MB of 1 GB physical memory used; 2.2 GB of 2.1 GB virtual memory used. Ki ...
分类:其他好文   时间:2018-07-08 22:11:22    阅读次数:750
Kafka:ZK+Kafka+Spark Streaming集群环境搭建(二)VMW安装四台CentOS,并实现本机与它们能交互,虚拟机内部实现可以上网。
Centos7出现异常:Failed to start LSB: Bring up/down networking. 按照《Kafka:ZK+Kafka+Spark Streaming集群环境搭建(一)VMW安装四台CentOS,并实现本机与它们能交互,虚拟机内部实现可以上网。》配置好虚拟机,正在使 ...
分类:其他好文   时间:2018-07-08 17:14:38    阅读次数:175
[Spark]-结构化流之输出篇
5.结构化流的输出 一旦定义好了streaming DataFrame/Dataset的最终结果,剩下的就是一些计算输出了.为此,必须使用 DataStreamWriter通过 Dataset.writeStream() 返回.此时必须以下一个或多个 输出落地 的详细信息: Data format, ...
分类:其他好文   时间:2018-07-08 00:29:28    阅读次数:210
[Spark]-结构化流之初始篇
1.什么是结构化流. 结构化流(Structured Streaming),是一种基于Spark-SQL引擎构建的,可容错的,可扩展的流处理引擎. 它以微批量计算的形式来表达流式计算,随着流式数据持续到达,它能持续的进行处理并更新最终计算结果. 它使用Spark-SQL带来的丰富的API,来表示流聚 ...
分类:其他好文   时间:2018-07-06 01:45:33    阅读次数:169
Hadoop WordCount(Streaming,Python,Java三合一)
一、Steaming Map任务: Reducer任务: 启动脚本: 二、Python Map任务: Reducer任务: 启动脚本: 三、Java Map: Reduce: Main: ...
分类:编程语言   时间:2018-07-05 19:45:14    阅读次数:254
Mapreducer任务启动
一、Streaming 注意:输出目录不能存在,故启动任务前,删除。mapper.sh,reducer.sh文件与start.sh文件同属于当前目录下 二、Python 注意:输出目录不能存在,故启动任务前,删除。mapper.sh,reducer.sh文件与start.sh文件同属于当前目录下 三 ...
分类:其他好文   时间:2018-07-05 18:20:04    阅读次数:210
WebGL AssetBundle 加载 缓存
U3D的AssetBundle真的是博(坑)大精(坑)深啊安卓的话要先打包到StreamingAssetPath中,安装后第一次运行,自动把Streaming中的解压到PersistentDataPath中,因为persistent目录是在运行过一次才创建的。这样,之后再更新资源就直接下载到persistent目录下了但是,WebGL项目呢这个就不存在什么streaming或者persistent
分类:Web程序   时间:2018-07-05 17:32:04    阅读次数:296
Kafka:ZK+Kafka+Spark Streaming集群环境搭建(十一)定制一个arvo格式文件发送到kafka的topic,通过sparkstreaming读取kafka的数据
定制avro schema: 创建producer发送对象: 读取schema文件为Schema对象: 解析schema文件 使用Schema对象生成record存储器,并对存储进行序列化: 通过producer发送数据到topic: 打印结果: ...
分类:其他好文   时间:2018-07-04 01:03:26    阅读次数:289
Kafka:ZK+Kafka+Spark Streaming集群环境搭建(九)安装kafka_2.11-1.1.0
如何搭建配置centos虚拟机请参考《Kafka:ZK+Kafka+Spark Streaming集群环境搭建(一)VMW安装四台CentOS,并实现本机与它们能交互,虚拟机内部实现可以上网。》 如何安装hadoop2.9.0请参考《Kafka:ZK+Kafka+Spark Streaming集群环 ...
分类:其他好文   时间:2018-06-30 23:03:43    阅读次数:208
1219条   上一页 1 ... 30 31 32 33 34 ... 122 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!