/var/spool/postfix/maildrop 小文件太多造成inode索引使用完解决办法问题表现和检查:1.运行df -i / 查看inode使用是否满;2.查看/var/spool/postfix/maildrop是否有非常多的小文件,ls直接卡死等情况;解决:1.cd /var/spo...
分类:
其他好文 时间:
2015-03-09 10:39:34
阅读次数:
156
5、文件上传-》说明:使用http协议只适合传输小文件,如果想传递大文件,则需要使用插件或者客户 端程序(使用ftp协议)-》客户端操作《1》为表单添加属性:enctype="multipart/form-data"《2》在表单中添加控件:《3》表单必须使用post提交方式-》服务器端操作《1》使用...
分类:
Web程序 时间:
2015-03-06 14:00:43
阅读次数:
131
源码 (不包含通信框架源码,通信框架源码请另行下载)上一篇文章写了如何通过TCP通信发送图片到客户端,有朋友问如何传送文件,本文将就如何发送文件进行探讨。对于比较小的文件,可以把文件转化成字节形式,用契约类包装一下,服务器收到后,再把字节转化成文件即可,这也是本文中实现的方式,这种方式的优点是比较简...
将百兆大文件分割成几十M的小文件,按大小进行分割package com.fenge;import java.io.BufferedReader;import java.io.File;import java.io.FileInputStream;import java.io.FileOutputSt...
分类:
其他好文 时间:
2015-03-05 18:52:42
阅读次数:
101
报警:Freeinodeson/var(percentage)(linuxhost:vfs.fs.inode[/var,pfree]):20%故障原因:/var/spool/postfix/maildrop小文件太多造成inode索引使用完1)查看inode使用状况;#df-i
/dev/sda398542478877719664781%/var切换到目录/var,检查哪个目录占用inode多#find*/!-typel|c..
分类:
其他好文 时间:
2015-03-04 21:14:10
阅读次数:
163
hive的优化问题1。启动一次JOB尽可能多做事,尽量减少job的数量。能重用就重用,要设计好的模型。2。合理设置reduce个数,reduce个数过多,会造成大量小文件问题。3。使用hive.exec.parallel参数控制在同一个sql中的不同的job是否可以同时运行,提高作业的并发4。注意j...
分类:
其他好文 时间:
2015-03-04 16:44:01
阅读次数:
340
//utility 读取内存可以是用该方法static LPSTR loadAudioBlock(char* filename, DWORD* blockSize){ HANDLE hFile= INVALID_HANDLE_VALUE; DWORD size = 0; DWORD readByt....
分类:
其他好文 时间:
2015-03-03 11:08:22
阅读次数:
170
当我们遇到大量小文件的传输时,一般会涉及到文件的压缩和解压,下面对zip的压缩解压直接上代码
压缩:
def zip_dir(dirname,zipfilename):
"""
| ##@函数目的: 压缩指定目录为zip文件
| ##@参数说明:dirname为指定的目录,zipfilename为压缩后的zip文件路径
| ##@返回值:无
| ##@函...
分类:
编程语言 时间:
2015-03-02 22:34:58
阅读次数:
268
我们在进行小文件传输或简单传输的时候,我们可以选择tftp;尤其在嵌入式开发方面。
1. 安装
sudo apt-get install xinetd tftp tftpd
(1) xinetd(eXtended InterNET services daemo):ftpd守护进程
① 标准Internet服务:telnet、ftp。
...
分类:
其他好文 时间:
2015-02-26 06:32:06
阅读次数:
120
HDFS: hadoop distributed file system 它抽象了整个集群的存储资源,可以存放大文件。 文件采用分块存储复制的设计。块的默认大小是64M。 流式数据访问,一次写入(现支持append),多次读取。 不适合的方面: 低延迟的数据访问 解决方案:HBASE 大量的小文件 ...
分类:
编程语言 时间:
2015-02-21 14:20:34
阅读次数:
242