RDD的动作算子 reduce(func) 通过func函数聚集RDD中的所有元素,这个功能必须是可交换且可并联的。(符合结合律和交换律),func输入为两个元素,返回为一个元素。 def add(x,y): return x+y sc.parallelize([1, 2, 3, 4, 5]).re ...
分类:
其他好文 时间:
2019-04-05 12:03:04
阅读次数:
344
一、创建表 create table testTable ( Id numbere, name varchar2(100), age number, createTime date, primary key(Id) ) 二、创建序列 create sequence seq_test 三、创建触发器 ...
分类:
数据库 时间:
2019-04-04 14:29:05
阅读次数:
225
(mac适用) 方法一、 无限重复执行,间隔单位秒。 方法二、 重复执行10次,间隔约0.4s,出现 xargs: xxx: Permission denied 时可加上sudo。 ...
分类:
其他好文 时间:
2019-04-03 22:29:42
阅读次数:
201
问题 问题 用过 Kafka 的同学用过都知道,每个 Topic 一般会有很多个 partitions。为了使得我们能够及时消费消息,我们也可能会启动多个 Consumer 去消费,而每个 Consumer 又会启动一个或多个streams去分别消费 Topic 里面的数据。我们又知道,Kafka ...
分类:
其他好文 时间:
2019-04-02 10:32:06
阅读次数:
187
链接:https://vjudge.net/problem/HDU-1159#author=0 题意: 最长公共子序列,LCS 思路: LCS 代码: ...
分类:
其他好文 时间:
2019-03-31 09:35:45
阅读次数:
156
Given a string which we can delete at most k, return whether you can make a palindrome. For example, given 'waterrfetawx' and a k of 2, you could dele ...
分类:
其他好文 时间:
2019-03-29 13:05:49
阅读次数:
107
基本命令 sed stream deitor(编辑器) 流编辑器,实现对文件的增加删除及该替换查 1、使用sed命令 进行查看 [root@VM_86_3_centos 000.txt]# seq 80 >000.txt(cat 000.txt 出现1-100数列) [root@VM_86_3_ce ...
分类:
其他好文 时间:
2019-03-29 01:06:33
阅读次数:
185
使用perl自带函数rename可以重命名文件名称,具体用法,rename $old_name, $new_name。 例如,要把文件名中“7--1_F03_2018-12-28.fsa”中的前缀“7--”去除。 关于perl的文件系统的操作实例,之前的例子还有: 合并并转化一代测序seq纯文本为f ...
分类:
其他好文 时间:
2019-03-28 19:25:41
阅读次数:
270
在数据测试的时候,发现开发最容易犯的错是: seq_num = 需要加的值+ seq_num 在需要加的值这边用的是select count(*) from tablexxx, 会有null的场景出现,导致最终seq_num被更新为null+数字=null ...
分类:
其他好文 时间:
2019-03-28 16:56:44
阅读次数:
237
0.拓扑图 1. 现象:for i in `seq 1 20` ;do sleep 1|telnet www.baidu.com 80 ;done 速度有很明显的卡顿 2.操作:用tcpdump抓包,发现总是有很多172.16.0.1的ARP包。而生产环节1.215才可以直接上网,于是把172.16 ...
分类:
其他好文 时间:
2019-03-28 00:30:24
阅读次数:
136