linux系统下文件有很多种属性,例如:文件大小、文件的拥有者、文件所属的组、文件访问模式等,其中文件访问模式属性的地位比较重要,因此重点介绍了文件访问模式的概念以及相关命令umask和chmod。
文件访问模式的表示方式有文字表示方式和八进制表示方式,应该熟练掌握。特殊属性的SUID位影响了可执行文件的执行权限,读者应该正确理解SUID的含义以及使用方法。...
分类:
系统相关 时间:
2014-10-07 23:27:34
阅读次数:
317
有时候需要把一个大文件拆分成几个小文件,由于生产系统上没有split程序,因此自己写了两个脚本来实现该功能。第一个脚本根据行数来拆分:#!/bin/bash
#filenamemy-line-split.sh
#usage:my-line-split.sh行数bigfile
#拆分的文件以bigfile.split.1bigfile.split.2...命名
spli..
分类:
其他好文 时间:
2014-10-06 02:21:30
阅读次数:
180
MogileFS:是一个开源的分布式存储,适用于存储海量的小文件。由LiveJournal旗下的DangaInteractive。这个公司还有memcache,MogileFS,Perlbal(http代理)等产品。其特点如下:1,工用于应用层(用户空间):无须特殊的核心组件,因为基于http或都nfs,一般客户端都支持。2,无..
分类:
其他好文 时间:
2014-10-05 03:52:18
阅读次数:
379
MogileFS简介:MogileFS是一个开源的分布式文件存储系统,MogileFS适用于存储海量小文件的工作场景,由LiveJournal旗下的DangaInteractive公司开发,该团队开发了包括Memcached、MogileFS、Perlbal等多个知名的开源项目。MogileFS的组成:1、server:主要包括mogilefsd和mogsto..
分类:
其他好文 时间:
2014-10-02 09:16:13
阅读次数:
296
大文件分块一般常用的web服务器都有对向服务器端提交数据有大小限制。超过一定大小文件服务器端将返回拒绝信息。当然,web服务器都提供了配置文件可能修改限制的大小。针对iis实现大文件的上传网上也有一些通过修改web服务器限制文件大小来实现。不过这样对web服务器的安全带了问题。攻击者很容易发一个大数...
分类:
Web程序 时间:
2014-09-30 14:53:39
阅读次数:
219
需求:
MSSQL,列出服務實例中所有數據庫的如下信息: 數據庫ID、數據庫名、創建日期、數據文件類型、數據文件大小、數據庫總大小、文件所在路徑。
寫法(後面的百分比為所花時間占比):
-- 连接子查询 (47%)
WITH cte_TotalSize AS
(
SELECT database_id
,CAST(SUM(size) AS FLOAT)/128 AS...
分类:
数据库 时间:
2014-09-30 03:14:32
阅读次数:
274
linux的压缩一般是针对单个文件的,而打包是把几个文件打包成一个文件(打包本身并没有减小文件的大小)常见的压缩文件扩展名*.gzgzip程序压缩的文件*.bz2bzip2程序压缩的文件*.tartar程序打包的数据,并没有压缩过*.tar.gztar程序打包的文件,其中经过gzip的压缩*.tar.bz2tar程..
分类:
其他好文 时间:
2014-09-25 04:14:29
阅读次数:
217
1 dfsadmin -setQuota的问题
dfsadmin -setQuota 限制文件数量
dfsadmin -setSpaceQuota 限制磁盘空间
2 解决Hadoop小文件问题?
数据块的默认大小是64M,如果一个文件的大小小于64M,那么它就属于Hadoop的小文件。
这样会浪费空间,所以要使用archive的方式来实现归并小文件。数据块的大小可以使用...
分类:
其他好文 时间:
2014-09-24 20:35:57
阅读次数:
143
原文地址:http://blog.licess.org/nginx-upgrade/昨天VPS侦探的VPS因为内存爆满挂掉,顺便升级了下Nginx,到最新比较稳定稳定的0.7.65。Nginx编译后就一个小文件,不带动态库,升级也可以无缝升级,并不影响访问。首先下载Nginx:执行wget http...
分类:
其他好文 时间:
2014-09-22 15:58:42
阅读次数:
179
平时很少使用大文件的内存映射,碰巧遇到了这样的要求,所以把过程记录下来,当给各位一个引子吧,因为应用不算复杂,可能有考虑不到的地方,欢迎交流。对于一些小文件,用普通的文件流就可以很好的解决,可是对于超大文件,比如2G或者更多,文件流就不行了,所以要使用API的内存映射的相关方法,即使是内存映射,也不...
分类:
其他好文 时间:
2014-09-18 23:29:24
阅读次数:
322