码迷,mamicode.com
首页 >  
搜索关键字:hdfs hbase shell ambari hadoop    ( 45642个结果
jenkins pipeline中获取shell命令的输出
//获取标准输出//第一种result = sh returnStdout: true ,script: "<shell command>"result = result.trim()//第二种result = sh(script: "<shell command>", returnStdout: ...
分类:系统相关   时间:2021-06-23 17:14:46    阅读次数:0
大数据平台搭建(Ambari +HDP)
安装包 ambari-2.7.3.0-centos7.tar.gz HDP-3.1.0.0-centos7-rpm.tar.gz HDP-UTILS-1.1.0.22-centos7.tar.gz HDP-GPL-3.1.0.0-centos7-gpl.tar.gz Ambari Ambari 跟 ...
分类:其他好文   时间:2021-06-23 16:52:56    阅读次数:0
Linux_shell_Shell脚本的调试
常见的错误范例 if 条件语句缺少结尾关键字 循环语句缺少关键字 成对符号落单,例如 [] () 等,一般建议是先写出符号,然后退格填写内容。 中括号两端没有空格 [$a -lt $b] 调试技巧 使用 dos2unix 命令处理再 Windows 下开发的脚本。 在一些关键的地方使用 echo 命 ...
分类:系统相关   时间:2021-06-22 18:35:49    阅读次数:0
Shell脚本--删除文本中指定字符开头的行
删除文本中指定字符开头的行: cat /root/1.txt | sed -e '/^WARN/d' > /root/2.txt 注意:上面红色字体为开头行的关键字 cat:查看文件 /root/filename:文件名| :管道符sed:在sed处理文件的时候,每一行都被保存在一个叫模式空间的临时 ...
分类:系统相关   时间:2021-06-22 17:54:38    阅读次数:0
SQLite数据库以及增删改查的案例
Android使用开源的与操作系统无关的SQL数据库——SQLite 一:在命令行下创建数据库: 1.启动模拟器后,打开命令行,执行adb shell 2.进入所在工程目录 3.执行sqlite3 mydb创建数据库文件 :表示结尾,--表示注解 二:包Android.database.sqlite ...
分类:数据库   时间:2021-06-21 20:47:00    阅读次数:0
kafka集群起停脚本
脚本位置 cd /home/hadoop/bin 脚本内容 vi kafka.sh #输入以下内容 #!/bin/bash case $1 in "start" ){ for(( i = 1;i <= 3;i = $i +1));do echo hadoop0$i kafka $1 ssh hado ...
分类:其他好文   时间:2021-06-20 18:41:23    阅读次数:0
kafka命令行的管理使用
1、创建topic 使用 kafka-topics.sh脚本 kafka-topics.sh --create --partitions 3 --replication-factor 2 --topic test --zookeeper hadoop01:2181,hadoop02:2181,had ...
分类:其他好文   时间:2021-06-20 18:38:22    阅读次数:0
Flume实战案例 -- 采集某个目录到HDFS
需求分析 采集需求:某服务器的某特定目录下,会不断产生新的文件,每当有新文件出现,就需要把文件采集到HDFS中去 结构示意图: 根据需求,首先定义以下3大要素 数据源组件,即source ——监控文件目录 : spooldir spooldir特性: 1、监视一个目录,只要目录中出现新文件,就会采集 ...
分类:Web程序   时间:2021-06-20 17:55:46    阅读次数:0
shell基础语法备忘录二
2021-06-19 关键字: 1、shell中的文件描述符 与Linux文件系统一样,shell中也有文件描述符的概念,且每一个shell进程中都默认有三个已打开的文件描述符。它们分别代表“标准输入”、“标准输出”与“错误输出”,对应的文件描述符号分别为 0、1、2。描述符号3及以后的正整数值可自 ...
分类:系统相关   时间:2021-06-19 19:36:57    阅读次数:0
linux中sqoop部署以及实现mysql数据导入hive
Sqoop(发音:skup)是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据 ...
分类:数据库   时间:2021-06-19 19:26:27    阅读次数:0
45642条   上一页 1 ... 3 4 5 6 7 ... 4565 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!