小伙伴们好,俗话说:工欲善其事必先利其器,hive是我们与大数据打交道的工具,所以我们需要熟练使用hive的一些函数,这样后面的数据测试就得心应手啦。
分类:
其他好文 时间:
2020-11-01 21:12:19
阅读次数:
17
如果说大数据里面hive是屠龙刀,那么pandas则是倚天剑,**帮助我们对数据数据挖掘、数据分析、数据清洗**
分类:
其他好文 时间:
2020-11-01 21:11:55
阅读次数:
20
前两天试了下 Flink SQL 写 Hive,对 Sink 部分写数据到 HDFS 的部分比较疑惑,特别是基于 checkpoint 的文件提交,所以看了下 StreamingFileSink 的源码(Flink SQL 写 hive 复用了这部分代码) StreamingFileSink 是 1 ...
分类:
其他好文 时间:
2020-11-01 20:49:03
阅读次数:
18
安装 pip3 install virtualenvwrapper -i https://pypi.douban.com/simple 设置linux的用户配置文件配置virtualenvwrapper vim ~/.bashrc WORKON_HOME=~/My_env # 设置virtualen ...
分类:
移动开发 时间:
2020-11-01 10:42:25
阅读次数:
29
在线安装 sudo yum install -y centos-release-scl sudo yum install -y devtoolset-9-gcc devtoolset-9-gcc-c++ # 安装了之后,并没有替换旧的,所以这里选择连接到最新的gcc/g++ echo "source ...
分类:
其他好文 时间:
2020-11-01 10:06:43
阅读次数:
20
deepin20系统中默认已安装python2.7和python3.7,我们这里需要用python3来配置RIDE环境。 1.安装pip,打开终端执行sudo apt install python3-venv python3-pip 安装完,可以执行pip3 -V查看pip版本 2.pip改源,默认 ...
分类:
其他好文 时间:
2020-11-01 10:01:48
阅读次数:
16
一、检查是否有 GCC gcc --version # 查看gcc版本 # 若没有输出,执行安装命令 yum -y install gcc 二、安装依赖 sudo yum -y groupinstall "Development tools" sudo yum -y install zlib-dev ...
分类:
编程语言 时间:
2020-11-01 09:38:18
阅读次数:
20
方法一 在可上网的ubuntu电脑上,使用apt-get install安装软件,然后到/var/cache/apt/archives目录下拷贝安装包到离线ubuntu电脑上。比如要安装samba,步骤如下: sudo apt-get install samba sudo cd /var/cache ...
分类:
其他好文 时间:
2020-11-01 09:34:19
阅读次数:
24
一开始是准备用vite的,但总是出不来,案例也比较少,感觉还不成熟,暂时放弃了。 1、升级 vue-cli为最新4.5 cnpm install -g vue @vue/cli 2、创建项目 vue create demo1 选择Manually select features 选中这些组件 选择3 ...
分类:
其他好文 时间:
2020-10-31 02:40:11
阅读次数:
36
一、前言 mac自带python版本为2xx,为了方便之后的版本控制,我们不直接用homebrew安装python3,我们使用一个python版本管理工具pyenv 二、pyenv安装 通过homebrew直接安装pyenv brew install pyenv 配置(如果用的bash就把命令最后的 ...
分类:
编程语言 时间:
2020-10-31 01:34:59
阅读次数:
23