码迷,mamicode.com
首页 >  
搜索关键字:python爬虫 mongodb ji    ( 12880个结果
BIRT 如何连接 MongoDB
导读关键词:BIRT MongoDB JDBC MongoDB 不同于 Oracle,MYSQL 这些关系数据库,没有提供 JDBC 连接,查询语言也不是 SQL 了,换成了一套有些复杂的脚本语言。 BIRT 里怎么连 MongoDB 呢,通常是这两种方式: 1、 新建 Scripted Data ...
分类:数据库   时间:2020-05-21 10:10:49    阅读次数:65
python爬虫之headers处理、网络超时、代理服务问题处理
1、请求headers处理 我们有时请求服务器时,无论get或post请求,会出现403错误,这是因为服务器拒绝了你的访问,这时我们可以通过模拟浏览器的头部信息进行访问,这样就可以解决反爬设置的问题。 import requests # 创建需要爬取网页的地址 url = 'https://www. ...
分类:编程语言   时间:2020-05-21 00:33:50    阅读次数:75
windows安装使用mongodb
下载:https://www.mongodb.com/download-center/community 选择windows ZIP安装包,解压后目录下图: 设置数据库路径和日志路径,分别 从bin目录进入cmd dos命令界面执行下面命令,文件路径提前要建好: mongod.exe --dbpat ...
分类:数据库   时间:2020-05-20 12:40:02    阅读次数:78
python爬虫-静态爬取豆瓣评论
from bs4 import BeautifulSoupimport requestsimport pandas as pdheader = {'Referer': 'https://movie.douban.com/subject/33420285/comments?status=P','Use ...
分类:编程语言   时间:2020-05-19 22:41:42    阅读次数:115
Python爬虫爬取目标小说并保存到本地
利用Python爬虫爬取目标小说并保存到本地 小说地址:http://book.zongheng.com/showchapter/749819.html(目录地址) 通过小说目录获取小说所有章节对应的url地址,然后逐个访问解析得到每一章节小说的内容,最后保存到本地文件内 文章中的代码只是第一个版本 ...
分类:编程语言   时间:2020-05-19 12:46:19    阅读次数:62
基于mongodb的搜索分页
mongodb模糊查询并分页 1.建立数据库 代码如下: var mongoose = require('mongoose'); var shortid = require('shortid'); var Schema = mongoose.Schema; var IndexDataSchema = ...
分类:数据库   时间:2020-05-19 12:34:18    阅读次数:62
Python爬虫随笔
1.网络数据采集的一个常用功能就是获取 HTML 表格并写入 CSV 文件。维基百科的文本编 辑器对比词条(https://en.wikipedia.org/wiki/Comparison_of_text_editors)中用了许多复杂 的 HTML 表格,用到了颜色、链接、排序,以及其他在写入 C ...
分类:编程语言   时间:2020-05-19 01:13:44    阅读次数:77
Python爬虫Scrapy框架IP代理的配置与调试
在调试爬虫的时候,新手都会遇到关于ip的错误,好好的程序突然报错了,怎么解决,关于ip访问的错误其实很好解决,但是怎么知道解决好了呢?怎么确定是代理ip的问题呢?由于笔者主修语言是Java,所以有些解释可能和Python大佬们的解释不一样,因为我是从Java 的角度看Python。这样也便于Java ...
分类:编程语言   时间:2020-05-18 14:26:20    阅读次数:81
vue+node 实现的一套简易博客系统
vue+node 实现的一套博客系统,包括博客前端展示页和博客后台管理页 segmentfault貌似预览图加载不出来,直接点?github看吧 项目github地址 简要技术栈: vue2.0+vue-router+vue-resource node+express+mongodb 后台管理页的编 ...
分类:其他好文   时间:2020-05-18 00:59:32    阅读次数:59
mongodb正则$regex命令行简单使用
Mongodb正则$regex 正则能帮助我们实现一些复杂的查询,mongodb中实现正也很简单 https://docs.mongodb.com/manual/reference/operator/query/regex/index.html 查询格式 { <field>: { $regex: / ...
分类:数据库   时间:2020-05-17 19:20:42    阅读次数:87
12880条   上一页 1 ... 52 53 54 55 56 ... 1288 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!