HBase在WAL机制开启的情况下,不考虑块缓存,数据日志会先写入HLog,然后进入Memstore,最后持久化到HFile中。HFile是存储在hdfs上的,WAL预写日志也是,但Memstore是在内存的 ...
分类:
其他好文 时间:
2020-12-07 12:09:37
阅读次数:
4
python爬取贴吧数据 最近写个简单的爬取贴吧数据的demo,分享给大家 爬取内容包括: import requests import parsel # pip install parsel import urllib.request import urllib.parse import re i ...
分类:
数据库 时间:
2020-12-07 12:01:47
阅读次数:
9
安装virtualenv 首先在安装python版本:请参考https://www.cnblogs.com/-wenli/p/13553674.html pip3 install virtualenv 创建虚拟开发环境(virtualenv会在当前目录中创建虚拟开发环境) # 直接创建 virtua ...
分类:
编程语言 时间:
2020-12-07 11:52:38
阅读次数:
5
1. 安装rimraf : cnpm install rimraf -g 2. 执行: rimraf node_modules 删除文件荚 3. 清空缓存: npm cache clean --force 4. 重新安装淘宝镜像: npm install -g cnpm --registry=htt ...
分类:
其他好文 时间:
2020-12-05 11:06:43
阅读次数:
8
前言 在本机模拟器的ubuntu18版本上进行的部署测试,参考的官方文档: hadoop: 链接地址 hive: 链接地址 使用的版本: hadoop: 3.2.1 hive: 3.1.2 全程是使用root账号进行的配置。 hadoop安装配置 hadoop使用的是虚拟集群,即单机模拟集群,dat ...
分类:
其他好文 时间:
2020-12-05 10:52:38
阅读次数:
7
#安装Docker ###在所有的Node节点安装 ###安装CE版本 [root@node-1 ~]# yum install -y yum-utils device-mapper-persistent-data lvm2 [root@node-1 ~]# yum-config-manager - ...
分类:
Web程序 时间:
2020-12-05 10:45:24
阅读次数:
10
解决创建maven项目Couldnotresolvearchetypeorg.apache.maven.archetypes:maven-archetype-quickstart问题今天用eclipse创建项目的时候报错如下图:解决方案:1.下载最新版maven-archetype-quickstart-1.1.jar2.命令行到下载目录下执行mvninstall:install-file-Dgr
分类:
Web程序 时间:
2020-12-05 10:41:27
阅读次数:
8
使用批处理实现软件的自动安装前提条件:文件与脚本在同一目录step:1.下载kugou的安装包,本实验使用kugou_8.1.45.19805_setup.exe。2.在安装包所在目录下新建批处理文件kugou_install.bat。3.编辑批处理文件kugou_install.bat,输入以下命令并保存。start/wait.\kugou_8.1.45.19805_setup.exe/S4.双
分类:
其他好文 时间:
2020-12-05 10:40:55
阅读次数:
5
淘宝 NPM 镜像 http://npm.taobao.org/ #经过下面的配置,以后所有的 npm install 都会经过淘宝的镜像地址下载 npm config set registry https://registry.npm.taobao.org npm install命令的使用 #使用 ...
分类:
其他好文 时间:
2020-12-04 11:45:46
阅读次数:
16
#install OS centos 7.5#install lsb net-tools package yum install -y redhat-lsb net-tools 1. Configure hostnames Configure each host in the cluster as ...
分类:
其他好文 时间:
2020-12-04 11:25:24
阅读次数:
4