为aiohttp爬虫注入灵魂摄影：产品经理与产品经理在苏州的小生活听说过异步爬虫的同学，应该或多或少听说过aiohttp这个库。它通过Python自带的async/await实现了异步爬虫。使用aiohttp，我们可以通过requests的api写出并发量匹敌Scrapy的爬虫。我们在aiohttp的官方文档上面，可以看到它给出了一个代码示例，如下图所示：我们现在稍稍修改一下，来看看这样写爬虫，运
分类：
Web程序 时间：
2020-12-08 12:03:47
阅读次数：
9
一日一技：如何从Redis的列表中一次性pop多条数据？摄影：产品经理产品经理说我炒的蛋炒饭比图中好吃当我们想从Redis的列表里面持续弹出数据的时候，我们一般使用lpop或者rpop:importredisclient=redis.Redis()whileTrue:data=client.lpop(‘key‘)ifnotdata:breakprint(f‘弹出一条数据：{data.decode(
分类：
其他好文 时间：
2020-12-08 12:01:42
阅读次数：
2
一日一技：如何正确获取MongoDB集合里面的最后一条数据摄影：产品经理厨师：kingname在我们使用Python查询MongoDB的时候，一般会使用MongoDB的集合（collection）对象的find()方法或者find_one()方法：importpymongohandler=pymongo.MongoClient().chapter_7.example_data_4#获得一个游标操作
分类：
数据库 时间：
2020-12-07 12:47:33
阅读次数：
11
一日一技：使用Locust对网络接口进行压力测试摄影：产品经理买单：kingname最近，有同学反应我的博客[1]访问速度有点慢，那么我如何直观地知道我博客的访问速度呢？我们可以使用Locust这个基于Python的压力测试工具来测试博客的访问速度。首先使用pip安装Locust:python3-mpipinstalllocust如果在macOS下安装出现了如下的报错信息：那么需要先执行如下命令：
分类：
其他好文 时间：
2020-12-07 12:47:03
阅读次数：
11
Windows Socket 学习编程 最近需要调试socket程序，记录一下socket的demo。由于socket有多种情况，一下分开讨论。 阻塞式单Client模式 这种是最基本的模式，Server只等待一个Client连接，这种可用于两个进程或者线程之间的通信。 Server Code vo ...
使用 Ribbon 实现客户端侧负载均衡 一、基本用法 一般如果导入 Eureka Client 服务的话，自动包含了 Ribbon，所以无需再次导入。 用法如下： 第一种：创建一个名为 RestTemplate 的 bean，并为其添加 @LoadBalanced 注解，使用该 RestTempl ...
分类：
其他好文 时间：
2020-12-07 12:35:22
阅读次数：
5
https://api.weibo.com/oauth2/authorize? client_id=4122644977 &response_type=code &state=study& forcelogin=true& '''redirect_uri=https%3A%2F%2Fstudy.16 ...
分类：
其他好文 时间：
2020-12-05 10:59:14
阅读次数：
8
Socket通信是Java网络编程中比较基础的部分，其原理其实就是源ip，源端口和目的ip，目的端口组成的套接字通信。其底层还设及到了TCP协议的通信。 Java中的Socket通信可以通过客户端的Socket与服务端的ServerSocket通信，同时利用IO流传递数据，也就是说Socket通信是 ...
分类：
编程语言 时间：
2020-12-04 11:25:43
阅读次数：
7
1.client端EurekaClient提供三个功能：EurekaClientAPIcontractsare:providetheabilitytogetInstanceInfo(s)(invariousdifferentways)providetheabilitytogetdataaboutthelocalClient(knownregions,ownAZetc)providetheabili
分类：
编程语言 时间：
2020-12-04 11:12:00
阅读次数：
5
Docker 架构 docker 是C/S架构的软件，无论是client端还是Server端都是由 docker 一个程序提供，这个程序有很多子程序。 docker daemon 就是其中一个子程序，当运行 docker daemon 时，主机就运行成一个守护进程服务器，它可以监听在某个套接字上，为 ...
分类：
其他好文 时间：
2020-12-03 12:26:13
阅读次数：
11
