码迷,mamicode.com
首页 >  
搜索关键字:大文件    ( 2438个结果
提升web响应速度的思路
web响应(主要指加载网页类,不包括大文件下载,看视频)的核心瓶颈在于延迟,不在于带宽。从感性认知的角度,由于存在tcp的慢启动,所以往往速率还未达到带宽值时,访问就已经结束;另外,没有交互就没有延迟,交互少会更快。从数据角度看:解决思路:
分类:Web程序   时间:2015-04-30 15:47:10    阅读次数:157
PHP上传大文件配置
使用PHP上传比较大的文件时,发现程序没反应,那是因为PHP的默认设置限制了上传文件的大小,所以要修改配置文件php.ini中的一些选项:(以下只是我个人的配置,大家可根据自己的实际需要配置)file_upload=on; //打开文件上传选项upload_max_files...
分类:Web程序   时间:2015-04-30 00:57:45    阅读次数:121
读大文件到mysql
起初使用java读文件处理格式后存入数据库,运行后发现,效率太低太低,4G文本,4000多万行,估计需要30天左右才能完成处理。 数据格式: 每行->  XXXX ||| XXXXXXX ||| XXXXXXXXXXXXXXXXX 数据是严格结构化的,因此查询到一种直接从文件导入mysql的方法: Load Data infile 参考文章:http://hunan.iteye.com/...
分类:数据库   时间:2015-04-29 19:54:18    阅读次数:216
大数据处理算法三:分而治之/hash映射 + hash统计 + 堆/快速/归并排序
百度面试题1、海量日志数据,提取出某日访问百度次数最多的那个IP。 IP 是32位的,最多有个2^32个IP。同样可以采用映射的方法,比如模1000,把整个大文件映射为1000个小文件,再找出每个小文中出现频率最大的 IP(可以采用hash_map进行频率统计,然后再找出频率最大的几个)及相应的频率。然后再在这1000个最大的IP中,找出那个频率最大的IP,即 为所求。   百度面试题2、搜...
分类:编程语言   时间:2015-04-29 19:53:53    阅读次数:192
windows虚机环境下,如何快速有效的删除大文件夹?
在调试稳定性测试过程中,由于有的机器C盘越来越小,就必须进行电脑清理,清理%tmp%目录和回收站是必须的。     现在我的虚机的%tmp%目录下有15万个文件,该如何快速有效删除呢?这些文件中有的是拒绝删除的。     方法1:直接删除Temp文件夹,它会一直扫描,最后会告诉你,不能删除,说什么有其他地方在用,而我压根就没有;     方法2:进入Temp文件夹,Ctrl+A选中所有文...
分类:Windows程序   时间:2015-04-28 11:56:43    阅读次数:148
java——操作文件
Java文件操作,共实现了文件复制(单个文件和多层目录文件),文件移动(单个文件和多层目录文件),文件删除(单个文件和多层目录文件),文件压缩 (单个文件),文件解压(单个文件),文件分割(将一个大文件分割为若干个小文件),文件组合(将多个文件组合到一个文件中)。packagettstudy.io;...
分类:编程语言   时间:2015-04-27 23:16:13    阅读次数:196
数据同步方案(附Java源码)
一.问题背景经常碰到要同步数据的情况,而系统自带的复制功能又不能实现增量同步,每次都要做全量复制,发生异常情况后只能重头再来,非常麻烦,优其是对那种大文件的处理,更是耗时。二.解決方案1.计算源目录数据指纹2.计算目标目录数据指纹3.对比指纹数据,找出差异项,得到需要添加,删除或更新的文件列表,计算...
分类:编程语言   时间:2015-04-27 21:22:55    阅读次数:268
关于csdn审核上传资源的效率问题,请官方给予解释!谢谢!
1.大文件分包上传!只通过一部分或者都不通过!导致的文件不可用问题。 2.文件上传的审核时间问题,请问下这边是人工审核,还是电脑审核.为什么慢的那么没有道理。 3.多次上传同一个文件,我的资源页里面不显示。也不提示,资源已经上传过了! 4.等等 希望官方给予解释!已经快要放弃csdn的感觉!是共享平台吗!还是以前那个大家的家园和学习园地吗!还能不能愉快的玩耍了. 在那山的这边海的...
分类:Web程序   时间:2015-04-27 15:22:43    阅读次数:259
第二部分 Mongodb增删改查
学习内容:1.mongodb增加操作2.mongodb删除操作3.mongodb查询操作增删改查的高级应用Capped Collection(固定集合)GridFS 大文件上传或下载1: insertMongoDB是面向文档存储的数据库,文档结构形式叫BSON(类似JSON)db.c1.insert...
分类:数据库   时间:2015-04-27 09:35:41    阅读次数:212
CentOS下如何查找大文件
在Windows系统中,我们可以使用TreeSize工具查找一些大文件或文件夹,非常的方便高效,在Linux系统中,如何去搜索一些比较大的文件呢?下面我整理了一下在Linux系统中如何查找大文件或文件夹的方法。1: 如何查找大文件?其实很多时候,你需要了解当前系统下有哪些大文件,比如文件大小超过10...
分类:其他好文   时间:2015-04-26 21:12:17    阅读次数:166
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!