1 Accepted 8508K 391MS C++ 2004B 2
相比下边，，优化太多太多了。。。 3 /** 4 baby-step-giant-step 因为数据量太大，，自己写hash 5 6 **/ 7
#include 8 #include...
分类：
其他好文 时间：
2014-05-13 19:27:32
阅读次数：
363
ASP.NET中利用DataGrid的自定义分页功能
ASP.NET中利用DataGrid的自定义分页功能和存储过程结合实现高效分页
ASP.Net中的DataGrid有内置分页功能, 但是它的默认的分页方式效率是很低的,特别是在数据量很大的时候,用它内置的分页功能几乎是不可能的事,因为它会把所有的数据从数据库读出来再进行分页, 这种只选取了一小部分而丢掉大部分的方法是不可去取的.
在最...
分类：
Web程序 时间：
2014-05-13 09:39:29
阅读次数：
348
Thrift 是什么？
Thrift源于大名鼎鼎的facebook之手，在2007年facebook提交Apache基金会将Thrift作为一个开源项目，对于当时的facebook来说创造thrift是为了解决facebook系统中各系统间大数据量的传
输通信以及系统之间语言环境不同需要跨平台的特性...
分类：
其他好文 时间：
2014-05-12 20:35:23
阅读次数：
296
分布式存储当下互联网飞速发展，海量并发所产生的数据量以几何方式增长，随着信息链接方式日益多样化，数据存储的结构也发生了变化，在这样的压力下我们不得不重新审视大量数据的存储所带来的挑战，比如：数据采集、数据存储、数据搜索、数据共享、数据传输、数据分析、数据可..
分类：
其他好文 时间：
2014-05-12 04:08:32
阅读次数：
493
大纲：一、关于MogileFS二、常见分布式文件系统三、MogileFS基本原理四、MogileFS的实现一、关于MogileFS当下我们处在一个互联网飞速发展的信息社会，在海量并发连接的驱动下每天所产生的数据量必然以几何方式增长，随着信息连接方式日益多样化，数据存储的结构也随着发生了变..
分类：
其他好文 时间：
2014-05-11 19:28:18
阅读次数：
570
如果你对项目管理、系统架构有兴趣，请加微信订阅号“softjg”，加入这个PM、架构师的大家庭
在最近做的一个项目中，由于每天核算的数据量过于庞大，需要把数据库进行分库保存。当数据分散到各个库之后，带来的数据更新操作就会存在一个一致性和完整性的问题。下面是一个典型的场景
假设目前存在三个物理库，现在...
分类：
其他好文 时间：
2014-05-11 16:57:12
阅读次数：
288
我们如果遇到需要从其它系统的数据库中取数据进行统计分析的问题，可疑选择使用ORACLE的ODI工具进行抽数，但是对方提供的数据库用户下没有任何对象，只是有查询所有表的权限，因此无法做数据反向。于是决定使用物化视图，把对方数据库中的数据拿过来，虽然数据量比较大，但是每月只拿一次，而且如果设置成增量更新...
分类：
数据库 时间：
2014-05-10 18:24:51
阅读次数：
523
Rs2008
在内存管理方面已经有了很大的改变。主要增加了文件缓存，允许把内存数据卸载到文件缓存中。而Rs2005
都是把数据放到内存中。对于大数据量的报表而言，很容易出现OutOfMemory 错误。在实际应用中，发现Rs2008 也经常出现 OutOfMemory
错误。主要有以下几个原因：1 ...
分类：
其他好文 时间：
2014-05-10 08:14:31
阅读次数：
317
在Form域中Post大于100K的数据
当表单发送的数据量很大时，就会报错。查阅MSDN了解到，原因是微软对用Request.Form()可接收的最大数据有限制，IIS4中为80K字节，IIS5中为100K字节。
下面是微软提供的几个解决方法:
1、用Request.BinaryRead 代替 Request.Form方法 来解析表单数据；
2、使用文件上传方案，比如：Microso...
分类：
其他好文 时间：
2014-05-09 22:13:58
阅读次数：
348
当hive在执行大数据量的统计查询语句时，经常会出现下面OOM错误，具体错误提示如下：
Possible error: Out of memory due to hash maps used in map-side aggregation.
Solution: Currently hive.map.aggr.hash.percentmemory is set to 0.5. Try set...
分类：
其他好文 时间：
2014-05-09 21:08:27
阅读次数：
366
