一、全文检索与Lucene介绍 1、全文检索 将非结构化数据中的一部分信息提取出来，重新组织，使其变得有一定结构，然后对此有一定结构的数据进行搜索，从而达到搜索相对较快的目的。这部分从非结构化数据中提取出然后重新组织的信息，我们称之索引。 这种先建立索引，再对索引进行搜索的过程就叫全文检索(Full ...
分类：
Web程序 时间：
2018-05-02 11:18:45
阅读次数：
298
优点 分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索。 实时分析的分布式搜索引擎。 可以扩展到上百台服务器，处理PB级别的结构化或非结构化数据。 ...
分类：
其他好文 时间：
2018-04-28 14:00:01
阅读次数：
132
2.1.1全局命令 Key * 查看所有键，(慎用，会把所有键都遍历一次并列出) Dbsize 查看键总数，不会遍历所有键，只是从内置函数中读取一个数 Exists [key] 检查键是否存在 Del [key] 删除键 Expire [key] [seconds] 设置键过期时间 Type [ke ...
转载自：http://www.open-open.com/lib/view/open1349965222556.html 做了很多年有关数据库的开发工作，现在把我对sql优化的一些经验分享下。(由于我主要使用mysql，对其它结构化数据库不太熟悉，所以可能具有片面性，欢迎拍砖) sql优化的方面： ...
分类：
数据库 时间：
2018-04-23 20:28:41
阅读次数：
211
本文由 网易云 发布。 常规情况下，我们一般使用多副本技术来提高存储系统的可靠性，无论是结构化数据库存储 (如典型的 mysql)、文档型 Nosql 数据库存储 (mongodb ) 或者是常规的 blob 存储系统 (GFS、Hadoop) 等，无不如此。因为数据几乎可以称得上是企业生命力的核心 ...
分类：
其他好文 时间：
2018-04-20 12:17:23
阅读次数：
189
1. 将新闻的正文内容保存到文本文件。 def save(content): f = open("content.txt", "a") f.write(content) f.close() 2. 将新闻数据结构化为字典的列表: 单条新闻的详情-->字典news 一个列表页所有单条新闻汇总-->列表n ...
分类：
其他好文 时间：
2018-04-17 20:49:35
阅读次数：
206
一、HBase概述 1、简介 1.11.介绍 是分布式 面向列族 的数据库，构建在hadoop之上. 类似于google的big table，对海量结构化数据的快速随机访问。 是hadoop生态系统的一部分，提供随机实时读写。 1.2.hbase和hadoop的区别 hdfs hbase 1） 分布 ...
分类：
其他好文 时间：
2018-04-06 17:37:21
阅读次数：
193
HBase底层存储原理——我靠，和cassandra本质上没有区别啊！都是kv 列存储，只是一个是p2p另一个是集中式而已！ 首先HBase不同于一般的关系数据库, 它是一个适合于非结构化数据存储的数据库. 另一个不同的是HBase基于列的而不是基于行的模式. 什么是BigTable： Bigtab ...
分类：
其他好文 时间：
2018-04-04 14:55:56
阅读次数：
163
1.Luncene介绍 1.Luncene介绍 案例：实现一个文件的搜索功能，通过关键字搜索文件，凡是文件名或文件内容包括关键字文件都需要找出来。还可以根据中文词语进行查询，并且需要支持多个条件查询。Lucene可以解决 数据分类 1.结构化数据：指具有固定格式或有限长度的数据，如数据库，元数据 2 ...
分类：
其他好文 时间：
2018-04-02 13:43:51
阅读次数：
165
医疗设备软件一般都是单机软件，如果是Windows平台，常会选择Access数据库存储结构化数据，因为他轻量，便于部署。然而随着医疗信息化的发展，医生希望对多台单机设备的数据进行管理，采用网络数据库当然可以解决这个问题，但软件部署会变得比较麻烦，所以如果Access数据能支持跨库查询，那就完美了，可... ...
分类：
数据库 时间：
2018-04-02 11:16:14
阅读次数：
165
