问题描述: (1)使用Java API创建HDFS文件并写入内容的副本系数为3 (2)使用命令上传至HDFS中的文件副本数为1:举例[hadoop@hadoop000 software]$ hadoop fs -put jdk-8u91-linux-x64.tar.gz / 问题回答: (1)使用J ...
分类:
编程语言 时间:
2021-07-05 16:38:12
阅读次数:
0
检测Tomcat日志关键字异常 日常工作中经常会遇到Tomcat日志报特定的错误导致 Linux 服务器CPU暴涨,这时候需要重启应用才可以降下来 所以就需要写一个shell脚本,报出特定的错误就重启应用 shell脚本如下: [root@Mike-VM-Node-10_10_0_188 ~]# v ...
分类:
其他好文 时间:
2021-07-02 16:18:28
阅读次数:
0
运行 HDFS 命令,总是出现恼人的 “WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable”... ...
分类:
其他好文 时间:
2021-07-02 16:04:09
阅读次数:
0
【推荐系统算法实战】 基于网页的 Notebook:Zeppelin 交互式数据分析 如果有一个工具,可以让你在同一个Web页面上写Shell代码,Python代码,Scala代码,你想要么? 如果还可以执行PySpark代码和Spark代码呢?心动了吗? 如果还可以写Hive-SQL,Spark- ...
分类:
编程语言 时间:
2021-07-02 15:35:46
阅读次数:
0
1.不能使用单引号 2.要对里面的双引号通过\进行转义 参考文章:https://www.cnblogs.com/iuskye/p/shell-json.html ...
分类:
Web程序 时间:
2021-07-02 15:30:00
阅读次数:
0
Sublime Text批量删除空白行 替换处理 CTRL+H 打开 replace 功能,勾选上左侧的 regular expression,并填写 find what栏: \s+$ (正则表达式) replace with栏: (这行留空) 接着点 replace all 修改保存时配置 点击菜 ...
分类:
其他好文 时间:
2021-07-01 16:49:01
阅读次数:
0
macOS安装Oh My Zsh macOS从Catalina开始将默认的shell变为了Zsh,可以安装Oh My Zsh让其更加好用。 安装命令 sh -c "$(curl -fsSL https://raw.githubusercontent.com/robbyrussell/oh-my-zs ...
分类:
系统相关 时间:
2021-07-01 16:48:07
阅读次数:
0
Ubuntu设置用户自动登录 方式一 安装时勾选用户自动登录 方式二 系统设置内设置开启用户自动登录 方式三 vim /etc/lightdm/lightdm.conf autologin-user=username ...
分类:
系统相关 时间:
2021-07-01 16:46:23
阅读次数:
0
昨天突然发现Iterm2有个新的功能shell integration然后就去试了一下,结果装了之后不能用, 只是本地安装成功但是服务器不成功, 试了很多种方法都没成功,也安装了bash版和zsh版但是都没用,网上也没有相关问题。 最后想了想感觉应该是我的本地用zsh但是服务器用的是bash。 参考 ...
分类:
系统相关 时间:
2021-06-30 18:19:53
阅读次数:
0
HDFS 概述 HDFS的产生背景和定义 HDFS产生背景 解决海量数据的存储问题 需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统。HDFS 只是分布式文件管理系统中的一种。 HDFS定义 HDFS(Hadoop Distributed File System),它是一个文件系统,用于 ...
分类:
其他好文 时间:
2021-06-30 17:40:30
阅读次数:
0