1.通过工具创建数据库scrapy 2.在scrapy数据库中创建douban表 3.在scrapy爬虫代码中设置指向数据库的参数pipeline.py 在setting.py文件中设置 4.安装MySQLdb驱动 MySQL-python-1.2.3.win-amd64-py2.7.exe 查看驱 ...
分类:
数据库 时间:
2016-12-21 16:27:24
阅读次数:
741
一、RouteData解析过程 在ASP.NET MVC中,服务器收到来自客户端的请求后,会经过一些列的处理拿到请求的数据,比如在Pipeline 管线事件中,通过订阅适当的事件,将HttpContext作为参数传入HttpContextWrapper进行封装,然后取得当前路由集合的数据RouteD ...
分类:
Web程序 时间:
2016-12-17 02:13:30
阅读次数:
279
logstash --help --可以通过此命令看到所有命令 -f, --path.config --配置文件路径 -e, --config.string --可直接运行的配置字符串 -w, --pipeline.workers --处理线程数 -b, --pipeline.batch.size ...
分类:
其他好文 时间:
2016-12-13 12:07:49
阅读次数:
381
在外理日志时,除了访问日志外,还要处理运行时日志,该日志大都用程序写的,比如log4j。运行时日志跟访问日志最大的不同是,运行时日志是多行,也就是说,连续的多行才能表达一个意思。 在filter中,加入以下代码: filter { multiline { } } 如果能按多行处理,那么把他们拆分到字 ...
分类:
其他好文 时间:
2016-12-09 15:47:17
阅读次数:
230
上一篇,我们介绍了当我们添加一个Entity时,通过Graphics封装其对应参数,通过EntityCollection.Add方法,将EntityCollection的Entity传递到DataSourceDisplay.Visualizer中。本篇则从Visualizer开始,介绍数据的处理,并... ...
分类:
其他好文 时间:
2016-12-06 09:36:56
阅读次数:
890
转载:http://xw-z1985.iteye.com/blog/1973205 服务端依次发生的步骤 客户端依次发生的步骤 ...
分类:
Web程序 时间:
2016-12-04 20:05:47
阅读次数:
235
写博客好麻烦,每次写到一半就不想写了。。。。前面好几个坑还没填完,这又来写新的了== 老板一句话,直接抛开之前检测的工作,来研究跟踪,这算是研究生阶段严格来说看的第一篇跟踪文章吧,这篇文章号称标志了跟踪也被深度学习攻陷~下面进入正题。 一、简介 1、CNN为什么在跟踪中用的少 为什么CNN兴起那么久 ...
分类:
Web程序 时间:
2016-12-03 02:04:02
阅读次数:
991
背景: 公司的音视频 盗版检测业务,使用redis-cluster作为 key-value 数据库, 使用张图片的 特征hash值作key。因为数据量太大,机器有限,集群内没有slaver 问题描述 线上服务报错 (SCARD 4288594168) of pipeline caused error ...
分类:
其他好文 时间:
2016-12-02 02:22:20
阅读次数:
472
摘要: 1.pipeline 模式 1.1相关概念 1.2代码示例 2.特征提取,转换以及特征选择 2.1特征提取 2.2特征转换 2.3特征选择 3.模型选择与参数选择 3.1 交叉验证 3.2 训练集-测试集 切... ...
分类:
其他好文 时间:
2016-11-25 20:15:22
阅读次数:
426
转载请注明出处:http://www.cnblogs.com/Ray1024 一、概述 这篇文章主要讲解渲染管线(rendering pipeline)的理论知识。 渲染管线是指:在给定一个3D场景的几何描述及一架已确定位置和方向的虚拟摄像机(virtual camera)时,根据虚拟摄像机的视角生 ...
分类:
其他好文 时间:
2016-11-25 09:34:54
阅读次数:
257