作者:程序之心丁仪 来源:https://chengxuzhixin.com/blog/post/zen_me_cheng_wei_ji_shu_da_niu.html 天天写业务代码,感觉没长进,技术深度止步不前,感觉很烦躁。很多人都在问,怎么样才能成为技术大牛?机会总是留给有准备的人,还是有一些 ...
分类:
其他好文 时间:
2020-11-20 11:35:34
阅读次数:
4
基本流程: 准备工作:(通过浏览器查看分析目标网页,学习编程基础规范) 获取数据:(通过HTTP库向目标站点发起请求,请求可以包含额外的header等信息,如果服务器能正常响应,会得到一个Response,便是所要获取的页面内容) 解析内容:(得到的内容可能是HTML、json等格式,可以用页面解析 ...
分类:
编程语言 时间:
2020-11-19 12:54:57
阅读次数:
10
2019 年 11 月,DropBox 官博发布了一篇《感谢你,Guido》的文章,透露出龟叔(Guido van Rossum)要离职退休的消息。后来龟叔自己也在推特证实了。 时隔一年,就在今天(2020 年 11 月 13 日)凌晨 1 点,龟叔在推特上宣布了一个大新闻,他要加入微软!!! 龟叔 ...
分类:
编程语言 时间:
2020-11-19 12:30:40
阅读次数:
11
注释 单行注释 // 多行注释 /* 多行注释 多行注释 多行注释 */ 文档注释 /** * @Description HelloWorld * @Author white */ 标识符 关键字 Java 所有的组成部分都需要名字。类名、变量名、方法名都被称为标识符,标识符大小写敏感。 数据类型 ...
分类:
编程语言 时间:
2020-11-19 12:12:07
阅读次数:
8
接口自动化测试三部曲:1、构造请求 2、判断结果 3、数据库查询 1、Python的第三方包:requests 简介:requests可以用来做接口测试、接口自动化测试、爬虫等 requests的环境搭建:管理员身份在cmd运行:pip3 install requests -i https://py ...
分类:
编程语言 时间:
2020-11-18 13:19:45
阅读次数:
23
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理 以下文章来源于腾讯云,作者:张凝可 很多网站为了避免被恶意访问,需要设置验证码登录,避免非人类的访问,Python爬虫实现验证码登录的原理则是先到登录页面将生成的验证码保存下来,然后 ...
分类:
编程语言 时间:
2020-11-18 13:00:48
阅读次数:
12
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理 以下文章来源于腾讯云,作者:周小董 重定向问题 在使用python爬虫的过程中难免会遇到很多301,302的问题。他们出现时,很大程度的影响到我们的爬虫速度和信息的准确性。下面针对不 ...
分类:
编程语言 时间:
2020-11-18 12:55:55
阅读次数:
8
可能99%的同学不做搜索引擎,但99%的同学一定实现过检索功能。搜索,检索,这里面到底包含哪些技术的东西,希望本文能够给大家一些启示。全网搜索引擎架构与流程如何?全网搜索引擎的宏观架构如上图,核心子系统主要分为三部分(粉色部分):(1)spider爬虫系统;(2)search&index建立索引与查询索引系统,这个系统又主要分为两部分:一部分用于生成索引数据build_index一部分用于
分类:
其他好文 时间:
2020-11-16 13:57:29
阅读次数:
12
12个行业月均阅读超100亿,看Spark如何助力微博Feed算法提升活跃度#编者按:本文由高可用架构向黄波约稿,介绍黄波在SparkSummitChina2016中的演讲精华,并侧重对微博系统和Feed系统进行了更多的介绍。黄波,2010年加入新浪微博,微博研发中心Feed技术专家,负责微博Feed流排序和推荐相关项目。目前专注于基于Spark、Storm等计算平台的大数据处理,致力于将分布式计
分类:
编程语言 时间:
2020-11-16 13:06:48
阅读次数:
9
https://www.cnblogs.com/duhuo/p/5678286.html 感谢都市烟火 Mysql show processlist 排查问题 一、命令概述: mysql show full processlist 用来查看当前线程处理情况,具体信息请参考官网:https://dev ...
分类:
数据库 时间:
2020-11-13 12:15:05
阅读次数:
23