每天都要重复处理分析数据 这样很累 也很枯燥 这种形式还不是最理想的工作状态 大部分工作实现自动化 工作 规范 稳定 易操作,中间过程不用人工干预 极快生成所需的结果 计算机科学知识 编程原理和思想及编程组成元素 VBA 时间就是钱,时间甚至比钱更重要,每天重复低效的工作 非常抑郁劳累 对自己来说是 ...
分类:
编程语言 时间:
2019-12-24 09:49:03
阅读次数:
72
1.利用模板创建登录或注册网页数据库栏: DATABASES = { 'default': { 'ENGINE': 'django.db.backends.sqlite3', 'NAME': os.path.join(BASE_DIR, 'db.sqlite3'), }}2.在myapp\urls. ...
分类:
其他好文 时间:
2019-12-21 20:11:22
阅读次数:
265
Python高级应用程序设计任务要求 用Python实现一个面向主题的网络爬虫程序,并完成以下内容:(注:每人一题,主题内容自选,所有设计内容与源代码需提交到博客园平台) 一、主题式网络爬虫设计方案(15分) 1.主题式网络爬虫名称 名称:爬取58同城房产租售信息 2.主题式网络爬虫爬取的内容与数据 ...
分类:
编程语言 时间:
2019-12-21 12:03:51
阅读次数:
88
一、主题式网络爬虫设计方案(15分) 1.主题式网络爬虫名称 软科中国最好医科大学排名2019,爬取中国最好医科大学排名、学校名称、省市、总分、指标得分(生源质量(新生高考成绩得分))等信息 2.主题式网络爬虫爬取的内容与数据特征分析 爬取内容:爬取中国最好医科大学排名、学校名称、省市、总分、指标得 ...
分类:
编程语言 时间:
2019-12-21 00:32:30
阅读次数:
92
互联网中的数据是海量的,然而大数据的重点并不在“大”,而在于“有用”。“如何自动高效地采集互联网中我们需要的数据信息并为我们所用?”这是一个重要的问题!而爬虫技术就是为了解决这些问题而生的。什么是网络爬虫?网络爬虫是模拟客户端发生网络请求,接收请求响应,一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。它们可以自动采集所有其能够访问到的页面内容,以获取或更新这些网站的内容或检索方式。网络爬虫
分类:
Web程序 时间:
2019-12-20 20:44:18
阅读次数:
136
今天调试一段EXCELVBA代码,在使用数组时总出现下标越界的报错,害得我查了半天,后来我把vba的本地窗口打开了,一下子就发现问题了。其实代码很简单,就不写注释了。 导出Excel之Epplus使用教程2(样式设置) 导出Excel之Epplus使用教程3(图表设置) 导出Excel之Epplus使用教程4(其他设置) 1、嵌入VBA代码 首先将vba代码保存成txt文本格式,然后用epplus去调用这个txt ...
分类:
其他好文 时间:
2019-12-17 18:21:24
阅读次数:
89
xpath解析是我们在爬虫中最常用也是最通用的一种数据解析方式。 环境安装 pip install lxml 解析原理 使用通用爬虫爬取网页数据 实例化etree对象,且将页面数据加载到该对象中 使用xpath函数结合xpath表达式进行标签定位和指定数据提取 实例化etree对象 - 1.将本地的 ...
分类:
其他好文 时间:
2019-12-17 14:44:18
阅读次数:
108