码迷,mamicode.com
首页 >  
搜索关键字:spark streaming flume 整合 avro netcat    ( 21554个结果
Spark分析sogou日志, RDD
import com.hankcs.hanlp.HanLPimport org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContext}import scala.collection.immutable.StringO ...
分类:其他好文   时间:2021-07-02 16:33:14    阅读次数:0
sparkStreaming
import org.apache.spark.SparkConfimport org.apache.spark.streaming.{Seconds, StreamingContext}// 创建一个本地模式的StreamingContext, 两个工作线程, 1s的批处理间隔//Master要求 ...
分类:其他好文   时间:2021-07-02 16:32:11    阅读次数:0
【推荐系统算法实战】 基于网页的 Notebook:Zeppelin 交互式数据分析Zeppelin简介环境安装快速开始Kotlin 开发者社区
【推荐系统算法实战】 基于网页的 Notebook:Zeppelin 交互式数据分析 如果有一个工具,可以让你在同一个Web页面上写Shell代码,Python代码,Scala代码,你想要么? 如果还可以执行PySpark代码和Spark代码呢?心动了吗? 如果还可以写Hive-SQL,Spark- ...
分类:编程语言   时间:2021-07-02 15:35:46    阅读次数:0
Inotify+rsync实时同步服务部署
监控目录数据变化 --- inotify 将数据进行传输 --- rsync 将监控和传输进行整合 --- sersync ...
分类:其他好文   时间:2021-07-02 15:24:55    阅读次数:0
Spring Boot 学习(一) 整合Druid数据源
自定义 1.引入依赖 <dependency> <groupId>com.alibaba</groupId> <artifactId>druid</artifactId> <version>1.1.17</version> </dependency> 2.写一个自己的配置类 分析: 在springb ...
分类:编程语言   时间:2021-07-01 17:15:58    阅读次数:0
看CarbonData如何用四招助力Apache Spark
摘要:CarbonData 在 Apache Spark 和存储系统之间起到中介服务的作用,为 Spark 提供的4个重要功能。 本文分享自华为云社区《Make Apache Spark better with CarbonData》,原文作者:大数据修行者 。 Spark 无疑是一个强大的处理引擎 ...
分类:Web程序   时间:2021-06-30 18:44:44    阅读次数:0
mybatis和spring整合的jar包准备
mybatis和spring整合 需要jar包 1、spring 2、mybatis 3、mybatis和spring的整合包(下载地址:https://github.com/mybatis/spring) 3.1、下载只有maven工程源码,没有jar包 3.2、根据源码自己生成,导入maven工 ...
分类:编程语言   时间:2021-06-30 18:41:47    阅读次数:0
简单介绍云技术
关于云技术的文章很多,我也就不介绍那些非常技术性的东西了,主要分享一些我在学习云技术的时候了解了些什么,以及我工作中接触到云的时候,主要考虑的问题。 云基本定义 云的专业定义在百科和其他blog上面都会写,我就不引用了,简单来说,云技术是一种可以整合闲置资源进行动态分配和按需分配的技术。其中资源主要 ...
分类:其他好文   时间:2021-06-30 18:28:56    阅读次数:0
JAVA简单整合protoc文件
引入maven <dependency> <groupId>com.google.protobuf</groupId> <artifactId>protobuf-java</artifactId> <version>3.5.1</version> </dependency> 将protoc文件生成j ...
分类:编程语言   时间:2021-06-29 16:11:55    阅读次数:0
flink-demo2
package cn.irisz.steam import org.apache.flink.api.common.RuntimeExecutionMode import org.apache.flink.streaming.api.scala._ import org.apache.flink.t ...
分类:其他好文   时间:2021-06-29 15:38:43    阅读次数:0
21554条   上一页 1 2 3 4 ... 2156 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!