机制 发现运行速度远慢于平均速度的任务，启动一个备份任务同时运行，采用先运行完的结果 前提 每个Task只能有一个备份任务 当前Job已完成的Task不少于5% 开启推测执行参数，默认打开 原理 estimatedRunTime=(currentTimestamp-taskStartTime)/pr ...
分类：
编程语言 时间：
2021-03-11 13:09:23
阅读次数：
0
Java的序列化框架Serializable， 对象被序列化后会附带额外信息， 不便于在网络中传输 自定义bean对象 实现Writable接口 必须有空参构造， 反序列化时， 需要反射调用空参构造函数 重写序列化和反序列化方法， 顺序要完全一致 若自定义bean要作为key， 需实现Compara ...
分类：
其他好文 时间：
2021-03-11 11:44:25
阅读次数：
0
一、需求：希望使用脚本启动虚拟环境下的jupyter notebook 二、问题： 直接使用如下脚本(jupyternotebook.sh)： conda activate pythonnohup jupyter notebook --no-browser --ip=0.0.0.0 --allow- ...
分类：
其他好文 时间：
2021-03-11 10:50:01
阅读次数：
0
介绍 分而治之是一个有效的处理大数据的方法，著名的MapReduce就是采用这种分而治之的思路。简单的说，如果要处理1000个数据，但是我们不具备处理1000个数据的能力，只可以处理10个数据。我们可以将这个任务分成100份，每份处理10个，并将最后的结果进行合成，形成1000个数据的处理结果。 把 ...
分类：
编程语言 时间：
2021-03-10 13:02:18
阅读次数：
0
1.在数据库中新建查询，NewFile是数据库名称（可更改），.mdf,.ldf放在对应得C:\Program Files\Microsoft SQL Server\MSSQL11.MSSQLSERVER\MSSQL\DATA对应得数据文件下，执行脚本即可 USE master;GOCREATE D ...
分类：
数据库 时间：
2021-03-10 12:56:56
阅读次数：
0
MySQL 1. 数据库简单操作 经常使用PHP脚本来操作数据库 从cmd连接mysql服务器 mysql -u root -p use 命令选择数据库 use RUNOOB; create 命令创建数据库 CREATE DATABASE 数据库名; create DATABASE RUNOOB; ...
分类：
数据库 时间：
2021-03-09 13:44:55
阅读次数：
0
jmeter的目录结构： # bin目录：存放jmeter的主jar包、主配置文件、启动脚本等。 #ApacheJmeter.jar：jmeter的主jar包 jmeter的启动是依赖与该jar包。可以通过命令启动： java -jar ApacheJmeter.jar #jmeter.bat：是j ...
分类：
其他好文 时间：
2021-03-09 13:09:05
阅读次数：
0
hadoop集群安装 安装环境服务部署规划 服务器IP node01 node02 node03 HDFS NameNode HDFS SecondaryNameNode HDFS DataNode DataNode DataNode YARN ResourceManager YARN NodeMa ...
分类：
其他好文 时间：
2021-03-09 12:59:55
阅读次数：
0
//https://blog.csdn.net/ternence_hsu/article/details/54380607 1、源码下载 ffmpeg 源码： https://ffmpeg.org/download.html#releases gas-preprocessor 工具 （编译脚本会自己 ...
分类：
移动开发 时间：
2021-03-09 12:56:06
阅读次数：
0
在python文件开头加上以下一段代码，即可解决中文编码问题，屡试不爽 # encoding=utf8 import sys reload(sys) sys.setdefaultencoding('utf8') ...
分类：
编程语言 时间：
2021-03-08 14:23:06
阅读次数：
0
