# 爬虫全过程:# 1.发送请求(请求库)# requests# selenium# 2.获取相应数据(服务器返回)# 3.解析并提取数据(解析库)# re正则# bs4(beautifulsoup4)# Xpath# 4.保存数据(存储库)# mongDB# 爬虫框架# Scrapy(基于面向对象... ...
分类:
编程语言 时间:
2019-06-14 20:04:01
阅读次数:
119
7 Reverse Integer Given a 32-bit signed integer, reverse digits of an integer. Example 1: Example 2: Example 3: Note:Assume we are dealing with an env ...
分类:
其他好文 时间:
2019-06-12 09:19:11
阅读次数:
90
在并行计算中,不可避免的会碰到多个任务共享变量,实例,集合。虽然task自带了两个方法:task.ContinueWith()和Task.Factory .ContinueWhenAll()来实现任务串行化,但是这些简单的方法远远不能满足我们实际的开发需要,从.net 4.0开始,类库给我们提供了很 ...
分类:
其他好文 时间:
2019-06-10 18:24:50
阅读次数:
83
大数据学习第四天 pstree 查看当前进程结构 source 加载文件 在当前bash . 在当前bash运行脚本 bash 相当于浏览器加cmd chomd +x 把文件变为可执行文件 #! /路径 在文件首行指定运行编译/解释器 不写时默认bash #! 注释的行会在第一次读取时直接运行 yu ...
分类:
其他好文 时间:
2019-06-09 18:19:42
阅读次数:
104
文章大纲 一、演变过程思路图二、何为大型网站三、架构体系演进四、架构总结五、参考文章 一、演变过程思路图 二、何为大型网站 1. 大型网站特性 既然说的是大型网站架构,那么架构的背后自然是解决人因面对大型网站特性而带来的问题。这样可以先给大家说下大型网站的特性,这些特性带来的问题就是人要解决的问题: ...
分类:
其他好文 时间:
2019-06-06 19:31:44
阅读次数:
124
1. 在我们与别人沟通问题和提出建议时候,可按照以下步骤进行 (1)检查自己对获取的信息是否真正了解(2)切实说出不了解的部分是什么,提问原则可根据5W1H的原则来。5W是指who、what、when、where、why。1H指的是how(3)思考有效问题,看看怎么处理不了解的部分,提出问题后,就要 ...
分类:
其他好文 时间:
2019-05-29 18:17:35
阅读次数:
111
流程控制 目录 表达式和语句 流程控制的三大结构 debug 流程控制脑图请戳?[http://naotu.baidu.com/file/30ab2cfa33a855fb631c04f849b4a2e3?token=d497f04ccc07ad7b] 1 表达式和语句 1.1 表达式 可以产生一个值 ...
分类:
Web程序 时间:
2019-05-11 16:03:36
阅读次数:
194
一、工程流图的常用图形 1.开始形状/结束形状,“跑道圆”形状代表开始或者结束。 2.处理过程,“矩形”,这里可以写一些“工序”“处理过程” 3.判断,“菱形”,判断是流程图中经常用到的 判断是否 判断条件 4.文件 普通的流程图中文件长这样 ↑ Axure中的文件↑ 文件一般是用在输出文件或者写入 ...
分类:
其他好文 时间:
2019-05-09 23:49:15
阅读次数:
172
1.1 上次课内容回顾 l Spring的AOP的注解(思想--) n AOP的相关的注解 u @Aspect :定义切面 u 通知的注解 l @Before :前置通知 l @AfterReturning :后置通知 l @Around :环绕通知 l @AfterThrowing :异常抛出通知 ...
分类:
编程语言 时间:
2019-05-04 14:55:33
阅读次数:
103
1, 昨天的成就: a) 完成的任务:框架搭建 b) 所花时间:6h c) 还剩余2h 2, 遇到的困难: a) 数据库连接困难重重, i. 例如连接不上 ii. 教程与自身不符 3, 今天的任务: a) 修改框架,重要的任务,将框架搭建完整,同时合理化 b) 美化框架 ...
分类:
其他好文 时间:
2019-04-26 22:31:23
阅读次数:
132