Maven 什么是Maven Maven 在美国是一个口语化的词语,代表专家、内行的意思。一个对 Maven 比较正式的定义是这么说的:Maven 是一个项目管理工具,它包含了一个项目对象模型 (POM:Project Object Model),一组标准集合,一个项目生命周期(Project Li ...
分类:
其他好文 时间:
2020-08-15 22:29:27
阅读次数:
73
前言:通过k8s编排文件部署grafana7.0.4,登录grafana重置密码后,发现浏览器报Unauthorized,截图如下:最开始以为是容器数据持久化到虚拟机,目录权限的问题导致的1.通过查看grafana的镜像启动用户为grafanauidgid均为4724722.然后宿主机的
分类:
其他好文 时间:
2020-08-12 15:51:03
阅读次数:
97
impala有时查询报错内存不足,并持续一段时间后自动恢复,报错时日志如下: org.apache.hive.service.cli.HiveSQLException: ExecQueryFInstances rpc query_id=834c3b2376181f0e:a901620f0000000 ...
分类:
其他好文 时间:
2020-08-10 18:38:19
阅读次数:
242
今日内容:1) hive的自定义函数 (简单会实现即可)2) hive优化部分: 能够理解, 知道有这些优化方案 , 记录 2.1: hive的数据压缩 2.2: hive的数据存储格式 2.3: fetch抓取 2.4: 本地模式 2.5: join的优化 2.6: SQL优化的方案 2.7: 动 ...
分类:
其他好文 时间:
2020-08-10 09:24:13
阅读次数:
57
Kettle巧用公式轻松实现数据抽取(图文并茂,带案例讲解)
分类:
其他好文 时间:
2020-08-08 00:40:05
阅读次数:
93
一. SparkSQL简介 Spark SQL是Spark用于结构化数据(structured data)处理的Spark模块。 Dremel > Drill(Apache) >Impala(Cloudrea) Presto(Hotonworks) Hive > Shark(对Hive的模仿,区别在 ...
分类:
数据库 时间:
2020-08-07 21:45:52
阅读次数:
79
主要有三种方向的产品可以推荐给你:一、如果你是小朋友,可以考虑使用时下国内比较火的Scratch,或者Scratch各种汉化的版本(由于Scratch是MIT做的开源项目,所以是提供源代码的,国内很多儿童编程创业公司就利用这个开源的代码改改,变成自己创业产品)。另外Google的Blockly也不错。具体的编程方式如下图所示:Scratch的编辑界面Scratch主要是给小朋友用的,以前只支持Fl
分类:
其他好文 时间:
2020-08-07 10:04:40
阅读次数:
84
针对hive on mapreduce 1:我们可以通过一些配置项来使Hive在执行结束后对结果文件进行合并: 参数详细内容可参考官网:https://cwiki.apache.org/confluence/display/Hive/Configuration+Properties 1 2 3 4 ...
分类:
数据库 时间:
2020-08-03 19:56:21
阅读次数:
103
一、安装Anaconda3 下载链接:https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ 注意:Anaconda自带Python,根据要安装的python版本选择对应的anaconda包,我安装的是Anaconda3-2018.12-Linu ...
分类:
系统相关 时间:
2020-08-01 21:23:55
阅读次数:
92
参考:https://my.oschina.net/ccLlinux/blog/1859116基本命令:rsync[OPTION]…SRC(需要备份的原文件)DEST(Push的位置)example:download:rsync-avuser@hostip:/scratch/test/test_sh.sh/Users/username/test/test.sh上传:rsync-av/Users/u
分类:
其他好文 时间:
2020-07-30 22:22:12
阅读次数:
96