码迷,mamicode.com
首页 >  
搜索关键字:小文件    ( 1027个结果
linux随笔(11)---umask和chmod
linux系统下文件有很多种属性,例如:文件大小、文件的拥有者、文件所属的组、文件访问模式等,其中文件访问模式属性的地位比较重要,因此重点介绍了文件访问模式的概念以及相关命令umask和chmod。 文件访问模式的表示方式有文字表示方式和八进制表示方式,应该熟练掌握。特殊属性的SUID位影响了可执行文件的执行权限,读者应该正确理解SUID的含义以及使用方法。...
分类:系统相关   时间:2014-10-07 23:27:34    阅读次数:317
拆分大文件的脚本
有时候需要把一个大文件拆分成几个小文件,由于生产系统上没有split程序,因此自己写了两个脚本来实现该功能。第一个脚本根据行数来拆分:#!/bin/bash #filenamemy-line-split.sh #usage:my-line-split.sh行数bigfile #拆分的文件以bigfile.split.1bigfile.split.2...命名 spli..
分类:其他好文   时间:2014-10-06 02:21:30    阅读次数:180
Mogilefs配置以及nginx代理mogilefs
MogileFS:是一个开源的分布式存储,适用于存储海量的小文件。由LiveJournal旗下的DangaInteractive。这个公司还有memcache,MogileFS,Perlbal(http代理)等产品。其特点如下:1,工用于应用层(用户空间):无须特殊的核心组件,因为基于http或都nfs,一般客户端都支持。2,无..
分类:其他好文   时间:2014-10-05 03:52:18    阅读次数:379
Nginx实现MogileFS的反向代理
MogileFS简介:MogileFS是一个开源的分布式文件存储系统,MogileFS适用于存储海量小文件的工作场景,由LiveJournal旗下的DangaInteractive公司开发,该团队开发了包括Memcached、MogileFS、Perlbal等多个知名的开源项目。MogileFS的组成:1、server:主要包括mogilefsd和mogsto..
分类:其他好文   时间:2014-10-02 09:16:13    阅读次数:296
Html5大文件断点续传
大文件分块一般常用的web服务器都有对向服务器端提交数据有大小限制。超过一定大小文件服务器端将返回拒绝信息。当然,web服务器都提供了配置文件可能修改限制的大小。针对iis实现大文件的上传网上也有一些通过修改web服务器限制文件大小来实现。不过这样对web服务器的安全带了问题。攻击者很容易发一个大数...
分类:Web程序   时间:2014-09-30 14:53:39    阅读次数:219
SQL窗口函數一例
需求: MSSQL,列出服務實例中所有數據庫的如下信息: 數據庫ID、數據庫名、創建日期、數據文件類型、數據文件大小、數據庫總大小、文件所在路徑。 寫法(後面的百分比為所花時間占比): -- 连接子查询 (47%) WITH cte_TotalSize AS ( SELECT database_id ,CAST(SUM(size) AS FLOAT)/128 AS...
分类:数据库   时间:2014-09-30 03:14:32    阅读次数:274
9.24
linux的压缩一般是针对单个文件的,而打包是把几个文件打包成一个文件(打包本身并没有减小文件的大小)常见的压缩文件扩展名*.gzgzip程序压缩的文件*.bz2bzip2程序压缩的文件*.tartar程序打包的数据,并没有压缩过*.tar.gztar程序打包的文件,其中经过gzip的压缩*.tar.bz2tar程..
分类:其他好文   时间:2014-09-25 04:14:29    阅读次数:217
解决Hadoop一些小问题(整理版)
1 dfsadmin -setQuota的问题 dfsadmin -setQuota 限制文件数量 dfsadmin -setSpaceQuota 限制磁盘空间 2 解决Hadoop小文件问题?    数据块的默认大小是64M,如果一个文件的大小小于64M,那么它就属于Hadoop的小文件。 这样会浪费空间,所以要使用archive的方式来实现归并小文件。数据块的大小可以使用...
分类:其他好文   时间:2014-09-24 20:35:57    阅读次数:143
【转】Nginx无缝升级
原文地址:http://blog.licess.org/nginx-upgrade/昨天VPS侦探的VPS因为内存爆满挂掉,顺便升级了下Nginx,到最新比较稳定稳定的0.7.65。Nginx编译后就一个小文件,不带动态库,升级也可以无缝升级,并不影响访问。首先下载Nginx:执行wget http...
分类:其他好文   时间:2014-09-22 15:58:42    阅读次数:179
内存映射对于大文件的使用
平时很少使用大文件的内存映射,碰巧遇到了这样的要求,所以把过程记录下来,当给各位一个引子吧,因为应用不算复杂,可能有考虑不到的地方,欢迎交流。对于一些小文件,用普通的文件流就可以很好的解决,可是对于超大文件,比如2G或者更多,文件流就不行了,所以要使用API的内存映射的相关方法,即使是内存映射,也不...
分类:其他好文   时间:2014-09-18 23:29:24    阅读次数:322
1027条   上一页 1 ... 95 96 97 98 99 ... 103 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!