1.文件存储方式保存数据的弊端： 1.缺乏对数据的整体管理，数据不便修改； 2.不利于数据分析和共享 3.数据量急剧增长，大量数据不可能长期保存在文件中。2.DB和DBMS 数据库（Database,简称DB）是按照数据结构来组织、存储和管理数据的仓库。 数据库管理系统（Database Manag...
分类：
数据库 时间：
2015-05-08 23:25:59
阅读次数：
264
计算机中，无非是数据和数据的处理这两件事。Excel的工作表能存储大量数据，除了这些原始数据，我们还要用函数来处理这些数据，比如求和求积，求平均值，排序等等，并把处理结果也存在单元格里。在Excel中，我们通常不给这些数据起个专门的名字，比如StudentName1，StudentName2，Sco...
分类：
其他好文 时间：
2015-05-08 20:09:26
阅读次数：
183
在更新大量数据时可能同时遇到两个问题： 如果每条更新执行一次sql性能很低，也容易造成阻塞； 批量更新时又有可能遇到主键重复的问题 使用 ON DUPLICATE KEY UPDATE?一条sql解决批量更新和主键重复问题(id为主键...
分类：
数据库 时间：
2015-05-07 17:10:48
阅读次数：
248
不管是日常业务数据处理中，还是数据库的导入导出，都可能遇到需要处理大量数据的插入。插入的方式和数据库引擎都会对插入速度造成影响，这篇文章旨在从理论和实践上对各种方法进行分析和比较，方便以后应用中插入方法的选择。插入分析MySQL中插入一个记录需要的时间由下列因素组成，其中的数字表示大约比例：连接：（...
分类：
数据库 时间：
2015-05-07 16:14:20
阅读次数：
131
在R语言中变量是在赋值时才创建的，不能事先进行声明。这里变量重命名实际上指的是给变量中的子变量重命名，如果从面向对象的角度来说，就象是修改一个类的属性名，其数据保持不变。在一般面向对象的语言中，修改属性名是不允许的，修改属性名就等于把该属性删除，再重新创建一个属性，并赋值。
在R语言里为什么要能修改属性名呢，这应和R主要的工作领域有关，R作为统计分析类语言，需要处理大量数据，处理的主...
分类：
编程语言 时间：
2015-05-07 10:30:29
阅读次数：
2163
Android应用很多情况下存储大量数据都会用SQliter,使用sqlliter不免要和cursor打交道，灵活使用cursor会省很多事。如将自己的数据组合在一个虚拟的表中（数据集合），通过Provider以cursor形式返回给用户，还可以规定cursor每取一次返回多少记录，以减少UI数据量大的负载压力。(如果只是封装下数据以cursor方式返回，MetrixCursor可以完成此需求，其...
分类：
移动开发 时间：
2015-05-07 00:55:32
阅读次数：
151
最近使用WCF遇到一个问题:当客户端向WCF服务发送一个大量数据时候,发现会提示:
"读取 XML 数据时，超出最大字符串内容长度配额 (8192)。通过更改在创建 XML 读取器时所使用的 XmlDictionaryReaderQuotas
对象的 MaxStringContentLength 属性，可增加此配额。" 于是上网搜索,都说修改配置就可以,但我是初学者,修改半天还没弄出...
分类：
其他好文 时间：
2015-05-06 17:56:41
阅读次数：
126
分词对于搜索引擎，输入法输入提示，语音识别等其它人机交互系统等都很有用。互联网的海量信息为分词研究提供了大量的，动态更新的原始资料库。很多互联网公司都有基于互联网内容的分词系统。并且采用HADOOP等分析大量数据。这些听上去很高大上，但是仔细想想基本原理应该是比较容易理解的，我们每个程序员也很容易可...
分类：
其他好文 时间：
2015-05-03 13:13:17
阅读次数：
237
一：表分区的应用场景 用于管理包含大量数据的表。二：表分区的优点 1.提高数据的可以性 2.减少管理负担 3.改善语句的性能三：分区的方式：(区间分区、散列分区、列表分区、组合分区) 1.区间分区(范围分区 range) 创建区间分区的语法： PARTITION BY RA...
分类：
数据库 时间：
2015-05-02 18:07:59
阅读次数：
264
在大的系统，或者或者需要处理大量数据的系统中，我们需要关注产生性能瓶颈症状，这些问题再规模上会影响app的响应性，如装箱操作、字符串操作、LINQ和Lambda表达式、缓存async方法、缓存缺少大小限制以及良好的资源释放策略、使用Dictionay不当、以及到处传递结构体等。在优化我们的应用程序的...
分类：
其他好文 时间：
2015-04-30 23:16:37
阅读次数：
179
