cannot assign instance of scala.collection.immutable.List$SerializationProxy to field org.apache.spark.sql.execution.aggregate.SortAggregateExec.aggre ...
分类：
编程语言 时间：
2019-11-07 17:41:34
阅读次数：
113
谈运维为什么离不开监控？典型监控系统一般是如何设计的？业务驱动的高可用监控系统又有何不同？作为巨头之一的电商平台京东， 其基于京东云的监控系统是否有值得借鉴的地方？本文将解答这些问题。本文整理自 10 月 30 日由京东云开发者社区和英特尔联合举办的在线公开课，京东云工具产品研发部专家架构师颜志杰的 ...
分类：
其他好文 时间：
2019-11-07 15:08:01
阅读次数：
97
pip3 安装salt报错 安装python36 devel 问题解决 saltstack 执行命令出错 Minion did not return. [No response] 查看minion的日志 删除公钥并重启minion master端可以正常和minion通信 Django ORM my ...
分类：
编程语言 时间：
2019-11-06 22:47:56
阅读次数：
117
First: Kafka 是什么？ Kafka 是一个发布订阅系统 最初是是LinkedIn 开发 最后交给Apache 开源组织 github地址：https://github.com/apache/kafka 是用java 和Scala 去开发的~ Kafka 现在主要用于 消息队列使用 Kaf ...
分类：
其他好文 时间：
2019-11-06 16:41:21
阅读次数：
92
使用场景:
在一些情况下，我们需要保持一个与数据库连接的connection，在没有写物理表权限或者没有必要写物理表时的现实场景用临时表替代物理表进行操作，临时表很多是基于Session的，Seesion间不能相互访问，断开后临时表自动清空，而spark自带的，read.format("jdbc")... ...
分类：
数据库 时间：
2019-11-06 10:23:44
阅读次数：
277
1. RDD是什么？ 官方定义： 不可变（immutable）：RDD集合类似于Scala中不可变的集合，例如List，当对集合中的元素进行转换操作时，产生新的集合RDD 分区的（Partitioned）：每个RDD集由有多个分区组成，分区就是很多部分。 并行操作（Parallel）：对RDD集合操 ...
分类：
其他好文 时间：
2019-11-06 01:16:40
阅读次数：
73
一、背景 Gradle是一个基于Apache Ant和Apache Maven概念的项目自动化建构工具。它使用一种基于Groovy的特定领域语言(DSL)来声明项目设置，抛弃了基于XML的各种繁琐配置。 面向Java应用为主。当前其支持的语言限于Java、Groovy和Scala，计划未来将支持更多 ...
分类：
其他好文 时间：
2019-11-05 21:29:48
阅读次数：
406
<scripttype="text/javascript">functioncheckFlag(){varuserType=navigator.userAgent;varAgents=["Android","iPhone","SymbianOS","WindowsPhone","iPad","iPod"];varflag=false;for(vari=0;i<Agents.len
分类：
微信 时间：
2019-11-05 20:09:15
阅读次数：
122
特征： 持续到达，数据量大，注重数据整体价值，数据顺序可能颠倒，丢失，实时计算， 海量，分布，实时，快速部署，可靠 linked in Kafka spark streaming：微小批处理，模拟流计算，秒级响应 DStream 一系列RDD 的集合 支持批处理 创建文件流 10代表每10s启动一次 ...
分类：
其他好文 时间：
2019-11-05 18:49:38
阅读次数：
98
1.windows安装scala环境 下载scala环境，执行 进入doc窗口输入scala -version查看scala版本号，出现版本号则安装成功 2.下载scala插件 下载与idea相同版本的scala插件 scala插件下载地址：http://plugins.jetbrains.com/ ...
分类：
其他好文 时间：
2019-11-05 15:04:01
阅读次数：
111
