由于之前已经搭建好了，今天是看视频回顾下，然后做下记录。 之前已经搭建好了Yarn集群，现在在Yarn集群上搭建spark。 1、安装spark 下载源码包：wget http://mirror.bit.edu.cn/apache/spark/spark-1.3.0/spark-1.3.0.tgz ...
分类：
其他好文 时间：
2021-01-01 12:18:40
阅读次数：
0
解决Rust -- update crates.io过慢的问题 在经过一系列操作，科,学,上,网等方法之后亲测无效，想到更改rust的文件源来加快速度 首先进入电脑的cargo目录，MAC OS 默认安装在 ~/.cargo下： cd ~/.cargo 1 创建一个config文件，这里使用vim编 ...
分类：
其他好文 时间：
2021-01-01 12:17:12
阅读次数：
0
改完文件名称后，Dr.he 发现分别保存5个状态的jpg 文件的文件夹出现缺少文件的情况。为了让他少熬夜查找缺失文件，结合网友分享的脚本，写了查找以下代码，满足他的需求，也以防自己忘记。以下代码能解决实际需求，适合初学者。不足之处，欢迎指出修正！ 1 import os 2 import datet ...
分类：
编程语言 时间：
2020-12-31 12:27:12
阅读次数：
0
code from threading import Thread from multiprocessing import Process import os def work(name): print('{}的pid是'.format(name), os.getpid()) if __name__ ...
分类：
编程语言 时间：
2020-12-31 12:09:31
阅读次数：
0
code import os from multiprocessing import Process def f(x): print('子进程id ：',os.getpid(),'父进程id ：',os.getppid()) return x*x if __name__ == '__main__': ...
分类：
系统相关 时间：
2020-12-31 12:06:57
阅读次数：
0
import os import time import shutil def del_file(filepath): """ 删除某一目录下的所有文件或文件夹 """ del_list = os.listdir(filepath) for f in del_list: file_path = os ...
分类：
其他好文 时间：
2020-12-31 11:42:16
阅读次数：
0
主机规划: 192.168.0.137 连接端口: 5672 web端口: 15672 rabbit1 磁盘存储 192.168.0.137 连接端口: 5673 web端口: 15673 rabbit2 磁盘存储 192.168.0.137 连接端口: 5674 web端口: 15674 rabb ...
分类：
其他好文 时间：
2020-12-30 11:19:58
阅读次数：
0
一、概念在Java中，文件的输入和输出是通过流（Stream）来实现的。一个流，必有源端和目的端，它们可以是计算机内存的某些区域，也可以是磁盘文件，甚至可以是Internet上的某个URL。对于流而言，我们不用关心数据是如何传输的，只需要向源端输入数据，从目的端获取数据即可。流按照处理数据的单位，可以分为字节流和字符流。字节流的处理单位是字节，通常用来处理二进制文件，例如音乐、图片文件等。而字符流
分类：
编程语言 时间：
2020-12-29 11:47:33
阅读次数：
0
socketserver 重写处理函数 import http.server import socketserver import os,io import urllib from http import HTTPStatus import email.utils import datetime i ...
分类：
编程语言 时间：
2020-12-29 11:43:36
阅读次数：
0
flume的概述 Apache Flume是一个分布式，可靠且可用的系统，用于有效地从许多不同的source收集，聚合和移动大量日志数据到集中式数据存储。 Apache Flume的使用不仅限于日志数据聚合。由于数据source是可定制的，因此Flume可用于传输大量event 数据，包括但不限于网 ...
分类：
Web程序 时间：
2020-12-29 11:10:09
阅读次数：
0
