什么是任务调度 大数据平台技术框架支持的开发语言多种多样,开发人员的背景差异也很大,这就产生出很多不同类型的程序(任务)运行在大数据平台之上,如:MapReduce、Hive、Pig、Spark、Java、Shell、Python 等。 这些任务需要不同的运行环境,并且除了定时运行,各种类型之间的任 ...
分类:
其他好文 时间:
2021-06-23 17:16:53
阅读次数:
0
1、Git环境配置 下载地址:https://git-scm.com/ 也就是Git官网 官网下载太慢,我们可以使用淘宝镜像下载:http://npm.taobao.org/mirrors/git-for-windows/ 下载完成后,傻瓜式安装即可 安装完成后,我们在开始菜单Git项菜单小有3个程 ...
分类:
其他好文 时间:
2021-06-23 17:03:31
阅读次数:
0
环境准备 kafka依赖zookeeper,所以搭建kafka需要先配置zookeeper。网格信息如下: zookeeper 192.168.56.101:2181 kafka1 192.168.56.101:9092 kafka2 192.168.56.101:9093 kafka3 192.1 ...
分类:
其他好文 时间:
2021-06-23 16:51:10
阅读次数:
0
Node.js安装 下载并默认安装node.js https://nodejs.org/en/ 检测是否安装成功 node -v npm -v 更换镜像地址 淘宝的cnpm npm install -g cnpm --registry=https://registry.npm.taobao.org ...
分类:
其他好文 时间:
2021-06-23 16:48:27
阅读次数:
0
动态SQL 什么是动态SQL 通过if,choose,when,otherwise,trim,where,set,foreach等标签,可自由组合成非常灵活的SQL语句,从而在提高SQL语句的准确性的同时,大大提高开发效率。 搭建测试环境 CREATE TABLE `blog` ( `id` var ...
分类:
其他好文 时间:
2021-06-23 16:41:27
阅读次数:
0
前期准备工作 数据库表 dp.properties driver=com.mysql.jdbc.Driver url=jdbc:mysql://localhost:3306/netshop?useSSL=true&useUnicode=true&characterEncoding=utf-8 use ...
分类:
其他好文 时间:
2021-06-23 16:40:43
阅读次数:
0
C# 扫描并读取图片中的文字 本文介绍如何通过C# 程序来扫描并读取图片中的文字,这里以创建一个.Net Core程序为例。下面是具体步骤,供参考。 程序测试环境: Visual Studio版本要求不低于2017 图片扫描工具:Spire.OCR for .NET 图片格式:png(这里的图片格式 ...
项目当中遇到一些问题,需要排查所有的依赖的license信息,需要将所有的依赖的license信息都列出来,由于依赖的继承和传递关系,依赖的数量非常庞大,因此手工来完成这个任务是不太现实,好在已经有很好的开源工具实现了这个功能. java项目 修改gradle的配置,安装插件Gradle-Licen ...
分类:
其他好文 时间:
2021-06-22 18:37:36
阅读次数:
0
前言 httprunner 3.x版本是基于 pytest 的,pytest 当然是可以支持 allure 报告了 windows环境版本: python 3.6版本 pytest 5.4.3版本 allure-pytest 2.8.6 最新版 allure 命令行 2.13.0 版本 allure ...
分类:
Web程序 时间:
2021-06-22 18:34:49
阅读次数:
0
上一篇博客主要介绍了决策树的原理,这篇主要介绍他的实现,代码环境python 3.4,实现的是ID3算法,首先为了后面matplotlib的绘图方便,我把原来的中文数据集变成了英文。 原始数据集: 变化后的数据集在程序代码中体现,这就不截图了 构建决策树的代码如下: ? #coding :utf-8 ...
分类:
编程语言 时间:
2021-06-22 18:29:30
阅读次数:
0