先贴原来的导入数据代码: 这条代码目前未全部将十几万行数据全部导入数据库中,只花了1个小时把5万行数据导入其中后,后面越来越慢,主要慢在excel表到了7万行数据左右后,读取excel中数据很慢了,总体来说影响导入速度有几个原因: 1、一直以来采用xlrd导入xls格式文件,如果文件有十几万行,只是 ...
分类:
数据库 时间:
2017-02-24 15:12:33
阅读次数:
1249
1 //月初月末时间戳 2 $Y = 2016;//获取年,示例,真实环境从前端获取数据 3 $m = 12;//获取月,示例,真实环境从前端获取数据 4 $month = $Y."-".$m;//当前年月 5 $month_start = strtotime($month);//指定月份月初时间戳... ...
分类:
其他好文 时间:
2017-02-21 11:37:49
阅读次数:
155
1.在标准C/C++中,我们可通过tm结构来获得日期和时间,tm结构在time.h中的定义如下:#ifndef _TM_DEFINEDstruct tm {int tm_sec; /* 秒–取值区间为[0,59] */int tm_min; /* 分 - 取值区间为[0,59] */int tm_h ...
分类:
其他好文 时间:
2017-02-08 11:48:27
阅读次数:
976
必应地图支持中英文地图的切换。 英文:<script charset="UTF-8" type="text/javascript" src="http://dev.ditu.live.com/mapcontrol/mapcontrol.ashx?v=6.2&mkt=en-us"> 中文:<scrip ...
分类:
其他好文 时间:
2017-01-25 18:51:33
阅读次数:
316
结合个人需求,从某个网站获取一些数据,发现网页链接是隐藏的,需要通过浏览器看后面的代码来获取真实的链接。 下面这个案例,直接是从真实的链接中爬去数据。 此外,发现用pandas的read_html不能直接解析“lxml”的表格,有待后续研究。 另外,爬去的数据发现有很多空格符号,主要是 "\r"、" ...
分类:
编程语言 时间:
2017-01-17 07:42:46
阅读次数:
278
解决办法: 查询数据量太大,添加索引即可解决问题 通过scrapy爬行完数据后,通过db.wooyun.drops.ensureIndex({"datetime":1}) ...
分类:
数据库 时间:
2017-01-10 14:35:27
阅读次数:
184
一、原因 从php5.1.0开始,PHP.ini里加了date.timezone这个选项,并且默认情况下是关闭的 也就是显示的时间(无论用什么php命令)都是格林威治标准时间 和我们的时间(北京时间)差了正好8个小时。 二、解决办法 方法一:在获取时间前加如下代码: date_default_tim ...
分类:
其他好文 时间:
2017-01-10 11:37:24
阅读次数:
196
1、时间戳是以秒为单位的浮点小数,时间戳以自1970年1月1日午夜到现在经过了的时间来表示 2、时间模块引入方式:import time 3、返回时间戳 time.time() 4、返回时间元组:time.localtime(),参数可传时间戳 5、返回时间戳:time.mktime(),参数可传时 ...
分类:
编程语言 时间:
2017-01-07 00:32:44
阅读次数:
207
import datetime import time string转datetime str = '2012-11-19' date_time = datetime.datetime.strptime(str,'%Y-%m-%d') date_time datetime.datetime(2012 ...
分类:
编程语言 时间:
2016-11-21 14:56:00
阅读次数:
267
C9高校,包括:清北、复交、浙南、中科大西交大和哈工大。1998年5月4日,时任国家主席江。泽。民在庆祝北京大学建校100周年大会上代表中国共.产.党和中华人民共和国中央人民政府向全社会宣告:“为了实现现代化,我国要有若干所具有世界先进水平的一流大学。”1999年,国务院批转教育部《面向21世纪教育 ...
分类:
其他好文 时间:
2016-11-19 03:03:16
阅读次数:
440