从源头上解决,在上传到HDFS之前,就将多个小文件归档 使用tar命令 带上参数-zcvf 示例: tar -zcvf xxx.tar.gz 小文件列表 如果小文件已经上传到HDFS了,可以使用在线归档 使用hadoop archive命令 示例: hadoop archive -archiveNa ...
分类:
其他好文 时间:
2020-07-11 17:00:14
阅读次数:
76
2020.7 LINUX基础操作梳理 (2020-06-23 15:09) 图文介绍虚拟化软件VMware安装linux-centos7、root密码重置 (2020-06-23 22:24) python+django+虚拟环境(virtualenv[wrapper])+nginx+uwsgi在l ...
分类:
其他好文 时间:
2020-07-11 15:39:01
阅读次数:
83
tuple只读列表,存储大量的数据,可索引,可切片 元祖中的可变类型数据,可以增删改查 其中的元素 重要数据,用户名,密码个人信息,使用元祖 元祖中如果只有一个元素,必须要有逗号 如果只有一个元素并没有逗号,那么它不是元祖,它与该元素的数据类型一致 tu = (1,2,'abc',[1,'a','b ...
分类:
编程语言 时间:
2020-07-11 15:36:06
阅读次数:
66
字典的概念 Python中,字典是一系列键-值对(Key-Value),每个键都与一个值相关联。这个值可以是数字、字符串、列表乃至字典。通过键可以访问与之相关联的值。 在字典中,可以存储任意数量的键-值对。特别的,键-值对数量为0的字典被称作空字典。 alien_0 = { 'color' : 'g ...
分类:
编程语言 时间:
2020-07-11 12:55:01
阅读次数:
71
{{uploading-image-382865.png(uploading...)}} 第4章 变形 import numpy as np import pandas as pd df = pd.read_csv('data/table.csv') df.head() School Class I ...
分类:
其他好文 时间:
2020-07-11 12:34:37
阅读次数:
51
# 用列表推导式做下列小题 # 1.过滤掉长度小于3的字符串列表,并将剩下的转换成大写字母 l1 = ['string', 'str', 'st'] li = [i.upper() for i in l1 if len(i) < 3] # 2.求(x,y)其中x是0-5之间的偶数,y是0-5之间的奇 ...
分类:
其他好文 时间:
2020-07-11 12:32:38
阅读次数:
73
来源:http://tinyurl.com/y55d23p4 这项目到底啥情况? 这项目怎么能烂成这样? 那,600 多万行代码是个什么概念? 不可避免的结局 你见过最烂的项目,撑了多长时间才完蛋?六个月?一年?今天介绍的这个奇葩项目,不但一开始就烂得透透的,还硬撑了12年多,直到项目负责人被逮起来 ...
分类:
其他好文 时间:
2020-07-11 11:13:53
阅读次数:
185
上一次用树莓派搭建了视频监控平台,成功实现了利用树莓派当监控摄像头,但是只能在线监控没有存档功能,这次针对上次的监控平台进行了改造,实现了录制归档功能。 这次主要针对上次的平台做以下几点改造: 新增视频流录制模块 调整监控管理页面 新增录制归档列表页面 1. 开发视频流录制模块 视频录制模块不像视频 ...
分类:
其他好文 时间:
2020-07-11 09:58:52
阅读次数:
76
我的第一个长代码 制作一个商店导购程序 # 生成商品列表 name = ''' ......#商场所有的商品 ''' new_name = name.split('\n') goods_list = [] i = 1 for item in new_name: i += 1 price = 5 + ...
分类:
编程语言 时间:
2020-07-11 09:53:19
阅读次数:
50
apt-cache和apt-get是apt包的管理工具, 他们根据/etc/apt/sources.list里的软件源地址列表搜索目标软件、并通过维护本地软件包列表来安装和卸载软件。 Ubuntu : apt-get 命令 Ubuntu中apt与apt-get命令的区别 一.查看本机是否安装软件 w ...
分类:
系统相关 时间:
2020-07-11 09:46:35
阅读次数:
73