Use the following steps to run a Spark Streaming job on a Kerberos-enabled cluster. Select or create a user account to be used as principal. This shou ...
分类：
其他好文 时间：
2019-03-19 15:23:20
阅读次数：
147
如果你执行spark的job时出现上面这个错误，同时满足以下条件 1、存在抽象父类 2、抽象父类中存在有参数的构造方法 3、子类实现了序列化接口，父类没有实现 那么恭喜你，来对地方了，解决方法非常简单，实现抽象父类的默认无参数构造方法就可以 下面代码的第9行 为什么会出现上面这个问题，我在这里强行解 ...
分类：
其他好文 时间：
2019-03-19 12:13:42
阅读次数：
156
掌握连接各个命令之间的连接符号用法也是很重要的。实际上，命令的用法并不难，例如 mkdir、touch和 find 也分别可以简单概括为“建立新目录”、“更新文件”和“在目录树中查找文件”而已。 但如果要理解 这一串命令的目的，以及为什么要这样写，就没有这么简单了。 关键之处就在于命令之间的连接符号 ...
分类：
其他好文 时间：
2019-03-17 13:51:55
阅读次数：
162
今天在进行项目联系的时候，启动在待机的虚拟机，发现虚拟机的网络设置又出现了问题。 我以为像往常一样重启网卡服务就能成功，但是它却报了Job for iptables.service failed because the control process exited with error code。 ...
分类：
其他好文 时间：
2019-03-16 19:23:28
阅读次数：
258
多表之间的关联最好是用逻辑上的关联，而不是物理上的关联，导致后期的扩展性差！！！ 原生sql -- 建表 一对多： create table dept(id int primary key auto_increment,name char(20),job char(20)); create tabl ...
分类：
数据库 时间：
2019-03-16 16:50:06
阅读次数：
211
1.概述 继续《那些年使用Hive踩过的坑》一文中的剩余部分，本篇博客赘述了在工作中总结Hive的常用优化手段和在工作中使用Hive出现的问题。下面开始本篇文章的优化介绍。 2.介绍 首先，我们来看看Hadoop的计算框架特性，在此特性下会衍生哪些问题？ 数据量大不是问题，数据倾斜是个问题。 job ...
分类：
其他好文 时间：
2019-03-15 17:26:05
阅读次数：
157
这是一个实时执行的任务服务，负责推送系统数据库短信信息表中的数据给运营商的接口完成发送短信操作： 上面配置的实时执行的意思就是间隔1毫秒执行无数次，由这个服务配合才能实现其他的任务服务，其他的任务就是完成插入指定的一些信息进入系统的数据表中，再由这个实时的推送服务第一时间推送给运营商接口完成发送操作 ...
分类：
其他好文 时间：
2019-03-15 15:56:21
阅读次数：
190
具体原因如下： Job for mysqld.service failed because the control process exited with error code. See "systemctl status mysqld.service" and "journalctl -xe" f ...
分类：
数据库 时间：
2019-03-13 18:06:02
阅读次数：
230
import multiprocessing as mp #该函数不能有返回值，如果需要则应该将值放在queue中 def job(a,b): print('aaaa') if __name__ == '__main__': #必须在该框架下 p1 = mp.Process(target = 函数名... ...
分类：
编程语言 时间：
2019-03-12 15:28:37
阅读次数：
171
