什么是任务调度 大数据平台技术框架支持的开发语言多种多样,开发人员的背景差异也很大,这就产生出很多不同类型的程序(任务)运行在大数据平台之上,如:MapReduce、Hive、Pig、Spark、Java、Shell、Python 等。 这些任务需要不同的运行环境,并且除了定时运行,各种类型之间的任 ...
分类:
其他好文 时间:
2021-06-23 17:16:53
阅读次数:
0
//获取标准输出//第一种result = sh returnStdout: true ,script: "<shell command>"result = result.trim()//第二种result = sh(script: "<shell command>", returnStdout: ...
分类:
系统相关 时间:
2021-06-23 17:14:46
阅读次数:
0
1.配置:进入dubbo-monitor-simple-2.0.0\conf目录修改dubbo.properties文件 dubbo.registry.address=zookeeper://127.0.0.1:2181 2、监控中心配置 参考官网:https://dubbo.apache.org/ ...
分类:
其他好文 时间:
2021-06-23 16:44:46
阅读次数:
0
为什么要分库分表? 将承受并发的能力提升3倍 将大数据了拆成多份 提升sql效率 用过哪些分库分表中间件/不同中间件的优缺点 cobar TDDL 只支持基本的crud操作 atlas 社区不咋维护了 sharding-jdbc(集成client) 运维成本低 缺点是耦合系统版本 mycat(pro ...
分类:
数据库 时间:
2021-06-23 16:37:48
阅读次数:
0
一、简介 人脸检测是人脸识别、人机交互、智能视觉监控等:工作的前提。近年来,在模式识别与计算机视觉领域,人脸检测已经成为一个受到普遍 重视、研究十分活跃的方向。本文针对复杂背景下的彩色正面人脸图像,将肤色分割、模板匹配与候选人脸图像块筛选结合起来,构建了人脸检测实验系统,并用自制的人脸图像数据库在该 ...
分类:
其他好文 时间:
2021-06-23 16:37:10
阅读次数:
0
常见的错误范例 if 条件语句缺少结尾关键字 循环语句缺少关键字 成对符号落单,例如 [] () 等,一般建议是先写出符号,然后退格填写内容。 中括号两端没有空格 [$a -lt $b] 调试技巧 使用 dos2unix 命令处理再 Windows 下开发的脚本。 在一些关键的地方使用 echo 命 ...
分类:
系统相关 时间:
2021-06-22 18:35:49
阅读次数:
0
删除文本中指定字符开头的行: cat /root/1.txt | sed -e '/^WARN/d' > /root/2.txt 注意:上面红色字体为开头行的关键字 cat:查看文件 /root/filename:文件名| :管道符sed:在sed处理文件的时候,每一行都被保存在一个叫模式空间的临时 ...
分类:
系统相关 时间:
2021-06-22 17:54:38
阅读次数:
0
Android使用开源的与操作系统无关的SQL数据库——SQLite 一:在命令行下创建数据库: 1.启动模拟器后,打开命令行,执行adb shell 2.进入所在工程目录 3.执行sqlite3 mydb创建数据库文件 :表示结尾,--表示注解 二:包Android.database.sqlite ...
分类:
数据库 时间:
2021-06-21 20:47:00
阅读次数:
0
XML 配置 官方文档:https://dubbo.apache.org/zh/docs/v2.7/user/references/xml/ provider示例 <beans xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:d ...
分类:
其他好文 时间:
2021-06-21 20:24:46
阅读次数:
0
一、Hystrix重要概念 1. 是什么 Hystrix是一个用于处理分布式系统的延迟和容错的开源库,在分布式系统里,许多依赖不可避免的会调用失败,比如超时、异常等,Hystrix能够保证在一个依赖出问题的情况下,不会导致整体服务失败,避免级联故障,以提高分布式系统的弹性。 “断路器”本身是一种开关 ...
分类:
其他好文 时间:
2021-06-21 19:58:20
阅读次数:
0