码迷,mamicode.com
首页 >  
搜索关键字:python爬虫 mongodb ji    ( 12880个结果
mongodb更新数据
1. 获取当前时间: Calendar.getInstance().getTime();2. 更新数据: public void updateProcessLandLog(ProcessLandLog land, List fields,List values) { Update updat...
分类:数据库   时间:2014-07-16 18:56:03    阅读次数:288
MongoDB 学习笔记(一)基础篇
1.MongoDB 特点面向集合存储,存储对象类型的数据方便模式自由,不需要定义任何模式(schma)动态查询完全索引,包含内部对象复制和故障恢复方便高效的二进制数据存储支持c# 平台驱动2.体系结构一台服务器可以创建多个Server 实例和数据库,(推荐一天server 机器创建一个实例),数据库...
分类:数据库   时间:2014-07-16 18:37:08    阅读次数:219
Linux 下mongodb的安装
l第一:下载,解压mongodb文件。把解压的文件放在/opt/下面(存放目录安装自己习惯存放)#wgethttp://fastdl.mongodb.org/linux/mongodb-linux-x86_64-2.0.4.tgz#tar-xvfmongodb-linux-x86_64-2.0.4.tgz#mvmongodb-linux-x86_64-2.0.4.tgzmongodb2.0.4(为了方便,把它从命名的..
分类:数据库   时间:2014-07-15 10:53:19    阅读次数:347
开源项目记录
数据存储 MongoDb 针对大数据量、高并发、弱事务的互联网应用 MemCache 简单的key-value存储,读取内存,效率高 Redis 可存储list,持久化,内存读取效率高 Cassandra 分布式数据库,更好的扩展性,对大数据更好的支持 http://www.ibm...
分类:其他好文   时间:2014-07-15 08:00:42    阅读次数:220
MongoDB Windows环境安装及配置[转]
MongoDB一般安装1.首先到官网(http://www.mongodb.org/downloads )下载合适的安装包,目前的最新版本为2.6 安装包有zip和msi格式的,这里推荐下载zip格式的,msi的其实也就是进行了下解压缩而已,而且安装时不让选择安装路径,默认安装到C:\Program...
分类:数据库   时间:2014-07-14 23:58:44    阅读次数:494
mongodb查看连接数、同步时间、oplog的命令
1) mongodb查看连接数: db.serverStatus().connections;2) mongodb查看同步时间: db.printSlaveReplicationInfo(); %%查看从服务器上的同步时间3) mongodb查看oplog分磁盘空间: db.printRepl...
分类:数据库   时间:2014-07-14 19:18:36    阅读次数:619
.NET下对MongoDB进行操作(二)
这次说下关于利用C#driver,对mongoDB进行简单的查询。我们可以利用Query类中的静态方法来创建一系列query,达到查询的目的。Query在using MongoDB.Driver.Builders这一名称空间中。1. 单一条件查询,可以参考如下代码: var q...
分类:数据库   时间:2014-07-14 10:07:41    阅读次数:239
MongoDB 分片操作
添加分片 useadmin //添加分片节点,每个分片都是一个副本集【allowLocal:true仅仅开发时才将分片配置到本地,生产时不能这样】 db.runCommand({addshard:"localhost:9335",allowLocal:true}) db.runCommand({ad...
分类:数据库   时间:2014-07-13 00:28:16    阅读次数:570
Python 爬虫 之 阅读呼叫转移(二)
上一篇博客我们成功地从网页上爬下了小说的一个章节,理所当然地,接下来我们要把整本小说都爬下来。首先,我们要把程序从原来的读完一章就结束,改成读完一章之后可以继续进行下一章的阅读。 注意到每个小说章节的网页下面都有下一页的链接。通过查看网页源代码,稍微整理一下(  不显示了),我们可以看到这一部分的 HTML 是下面这种格式的:...
分类:编程语言   时间:2014-07-12 22:45:47    阅读次数:341
Python 爬虫 之 阅读呼叫转移(三)
虽然上一篇博客中我们可以连续地阅读章节了,但是,难道每一次看小说都运行一下我们的 Python 程序?连记录看到哪里都不行,每次都是重新来过?当然不能这样,改!现在这么多小说阅读器,我们只需要把我们要的小说抓取到本地的 txt 文件里就好了,然后自己选个阅读器看,怎么整都看你了。 其实上个程序我们已经完成了大部分逻辑,我们接下来的改动只需要把抓取到每一章的时候不用显示出来,而是存入 txt 文件之中。另外一个是程序是不断地根据下一页的 Url 进行抓取的,那么什么时候结束呢?注意当到达小说的最后一章...
分类:编程语言   时间:2014-07-12 18:35:14    阅读次数:279
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!