1.准备文本文件,从文件创建RDD lines=sc.textFile(),筛选出含某个单词的行 lines.filter(),lambda 参数：条件表达式 2.生成单词的列表,从列表创建RDD words=sc.parallelize(),筛选出长度大于2 的单词 words.filter() ...
分类：
其他好文 时间：
2021-03-29 12:30:29
阅读次数：
0
场景 项目中接入了阿里云日志服务，比起以前自己搭建的ELK日志体系，云上的服务优点是接入简单，提供了易用的web ui界面方便查询日志。 省了自己搭建日志监控体系，但缺点是完全依赖云服务，没法自己定制，需要仔细阅读文档才能在日常工作更好地运用。 问题 昨天搜索某服务日志时遇到一个问题： 项目里的代码 ...
分类：
其他好文 时间：
2021-03-29 12:09:36
阅读次数：
0
1. 准备文本文件从文件创建RDD lines=sc.textFile()筛选出含某个单词的行 lines.filter()lambda 参数：条件表达式 2. 生成单词的列表从列表创建RDD words=sc.parallelize()筛选出长度大于2 的单词 words.filter() ...
分类：
其他好文 时间：
2021-03-29 12:04:28
阅读次数：
0
1、重写commit，删除大文件 git filter-branch --force --index-filter "git rm -rf --cached --ignore-unmatch CPT_0707_ao/temp_past/temp2/deltap.csv" --prune-empty ...
分类：
Web程序 时间：
2021-03-26 15:31:53
阅读次数：
0
c++函数在linux系统下编译之后会变成如下样子 _ZNK4Json5ValueixEPKc 在linux命令行使用c++filter $ c++filt _ZNK4Json5ValueixEPKcJson::Value::operator[](char const*) const 可以得到函数的 ...
分类：
编程语言 时间：
2021-03-17 14:19:33
阅读次数：
0
1. hscale 2. vscale static void yuv2p010cX_c(SwsContext *c, const int16_t *chrFilter, int chrFilterSize, const int16_t **chrUSrc, const int16_t **chrV ...
分类：
其他好文 时间：
2021-03-17 14:06:46
阅读次数：
0
原文：https://reactjs.org/blog/2019/08/15/new-react-devtools.html Introducing the New React DevTools We are excited to announce a new release of the Reac ...
分类：
其他好文 时间：
2021-03-17 14:05:07
阅读次数：
0
大数据技术板块划分 数据采集 flume kafka logstash filebeat ... 数据存储 mysql redis hbase hdfs ... 虽然mysql不属于大数据范畴 但是我在这也列出来了，因为你在工作中离不开它 数据查询 hive impala elasticsearch ...
分类：
其他好文 时间：
2021-03-17 14:04:41
阅读次数：
0
1. 拉取elasticsearch7.6.0镜像： sudo docker pull elasticsearch:7.6.0 2. 输入命令，构建容器： sudo docker run --name es1 -e 'discovery.type=single-node' --network=myn ...
分类：
其他好文 时间：
2021-03-17 14:02:05
阅读次数：
0
ExceptionFilter 1. 自定义一个CustomExceptionFilterAttribute，实现IExceptionFilter接口 2. 实现方法，先判断异常是否被处理过。没处理过，就先处理 3. 分情况处理。 如果是ajax请求，就返回JsonResult。否则，返回错误页面 ...
分类：
Web程序 时间：
2021-03-16 11:43:29
阅读次数：
0
