Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架，在业界得到了广泛应用。本文是系列第九篇，介绍 horovod on spark 如何启动。 ...
分类：
其他好文 时间：
2021-07-05 17:30:40
阅读次数：
0
pip离线安装是重点，依赖的安装重点（下面有详细图解）vue在下 # 1 pip换源 》提高下载模块的速度（） # 2 每个python项目，都应该有个requirement.txt >项目依赖的模块 >pip freeze >requirement.txt #生成 >pip install -r ...
分类：
其他好文 时间：
2021-07-05 17:25:34
阅读次数：
0
import os def traverse_dir(path): for root, dirs, files in os.walk(path): for dir in dirs: dir_path = os.path.join(root, dir) print(dir_path) traverse ...
分类：
其他好文 时间：
2021-07-05 17:23:58
阅读次数：
0
查询历史弹幕 https://api.bilibili.com/x/v2/dm/history 时返回的是 ProtoBuf 格式的数据，需要用 protoc 和 google.protobuf 解析。 流程 首次使用，需要下载安装。https://github.com/protocolbuffer ...
分类：
其他好文 时间：
2021-07-05 17:06:05
阅读次数：
0
现在主流监控软件和云平台提供的流量监控，监控粒度最小只能设置为1分钟，无法准确定位故障，特别是瞬时突发较大的业务 对比python的snmp库还是更喜欢用subprocess调用snmpwalk命令，脚本如下，前端可以使用脚本采集到的数据进行绘图 1 #! /usr/bin/env python 2 ...
分类：
其他好文 时间：
2021-07-05 16:57:15
阅读次数：
0
最近有项目需要去某个文件夹里面，获取所有XML文件，然后从XML文件中查找特定节点中查找是否有特定信息。 为了便于获取所有文件信息，直接用bat文件每天自动运行生成一个文件列表list信息供查看。 cd /d %~dp0 dir /s /b *.* > FileList.txt 所以接下来要做的事情 ...
分类：
编程语言 时间：
2021-07-05 16:50:22
阅读次数：
0
python-迭代器生成器 python 三大利器， 迭代器，生成器和装饰器 迭代是Python中常用且非常强大的一个功能，可以被for循环的就是可迭代的，目前有字符串，列表，元组，字典，集合。 通过使用两个单独方法来实现的；它们被用于允许用户自定义类对迭代的支持。 可迭代对象iterable 是P ...
分类：
编程语言 时间：
2021-07-05 16:49:24
阅读次数：
0
1.需要在联网的linux环境下下载好所需要的包 /root/temp 目录 pip3 download impala -d /root/temp pip3 download impyla -d /root/temp 2.下载之后的包 3.然后拷贝到离线的环境下 执行 pip3 install安装所 ...
分类：
编程语言 时间：
2021-07-05 16:41:50
阅读次数：
0
namespace 解析数字开头的变量JSON { class Program { static void Main(string[] args) { string strJson = "{\"1st_attempt\":\"2021-02-09 16:32:15\",\"2nd_attempt\" ...
