1 ulimit 概述 1.1 概述 系统性能一直是一个受关注的话题，如何通过最简单的设置来实现最有效的性能调优，如何在有限资源的条件下保证程序的运作? ulimit 是Linux在处理这些问题时，经常使用的一种简单手段。 ulimit 是一种 Linux 系统的内建功能，它具有一套参数集，用于为由 ...
分类：
系统相关 时间：
2020-10-06 21:21:47
阅读次数：
48
1、查看基本信息，32 位 ELF 程序，注意到是静态链接 运用 strings 工具发现了 UPX 字样 2、脱壳 3、载入 IDA 一个进程在由 pipe()创建管道后，一般再fork一个子进程，然后通过管道实现父子进程间的通信，管道两端可分别用描述字fd[0]以及fd[1]来描述，需要注意的是 ...
分类：
其他好文 时间：
2020-10-05 22:28:52
阅读次数：
31
https://www.jenkins.io/zh/doc/book/installing/ Jenkins是一个开源的自动化服务器，可以用来轻松地建立持续集成和持续交付(CI/CD)管道。 持续集成(CI)是一种DevOps实践，在这种实践中，团队成员定期将他们的代码更改提交到版本控制存储库，然后 ...
分类：
其他好文 时间：
2020-09-24 21:10:32
阅读次数：
43
基于Spider父类进行全站数据的爬取 全站数据的爬取:将所有页码对应的页面数据进行爬取 手动请求的发送(get): yield scrapy.Request(url,callback) 对yield的总结: 向管道提交item对象 yield item 手动请求发送 yield scrapy.Re ...
分类：
其他好文 时间：
2020-09-21 11:50:33
阅读次数：
45
scrapy下载图片 爬虫类中,将img_src作为item的属性yield即可 关键实现点在管道类里 导入一个图片的管道类 from scrapy.pipelines.images import ImagesPipeline 发请求 import scrapy 重写图片管道类的三个父类方法 get ...
分类：
其他好文 时间：
2020-09-21 11:50:07
阅读次数：
31
一、前言 一般来说，我们是在windows下编写并且调通jmeter脚本，以及使用它来对接口进行基准性能测试。但是由于在公司由于网络的限制，整个公司公用100M或200M的带宽，并且每部PC的上传和下载都会限速到约3M。所以，真正压测需在linux环境下（让运维开通一个无带宽限制环境）运行，得到的性 ...
分类：
系统相关 时间：
2020-09-18 04:10:56
阅读次数：
64
多任务和cpu时间片： 不过，cpu如何选择下一个要执行的进程，这是一件非常复杂的事情。在Linux上，决定下一个要运行的进程是通过"调度类"(调度程序) 来实现的。程序何时运行，由进程的优先级决定。除此之外，优先级还影响分配给进程的时间片长短。在Linux中，改变进程的nice值， 可以影响某类进... ...
分类：
系统相关 时间：
2020-09-18 03:00:11
阅读次数：
45
现如今，Kafka已不再是一个单纯的消息队列系统。Kafka是一个分布式的流处理平台，被越来越多的公司使用，Kafka可以被用于高性能的数据管道，流处理分析，数据集成等场景。本文分享总结了几个Kafka常见的面试问题，希望对你有所帮助。主要包括以下内容：Kafka是如何保障数据不丢失的？如何解决Kafka数据丢失问题？Kafka可以保障永久不丢失数据吗？如何保障Kafka中的消息是有序的？如何确定
分类：
其他好文 时间：
2020-09-17 23:41:36
阅读次数：
33
##Shell-文件操作命令、管道命令、文件编辑命令(VI) ###（1）查看当前目录下所有文件信息 格式：ls [-al] 参数：a 显示隐藏文件 l 显示文件的详细信息 (命令参数可以组合使用) ###（2）切换目录 格式：cd 要切换到的目录 cd .. 切换到上一级目录 cd ~ 当前用户所 ...
分类：
系统相关 时间：
2020-09-17 19:50:04
阅读次数：
51
中间件： Pipline，管道任务实现。每个任务都有一个 handle 操作逻辑。 Handle 接收俩参数，一个是请求信息，另一个是一个闭包Con 或者说是一个匿名函数。提交请求的内容将会被逐个任务顺序处理。 门面：Cache，Redis，中间件，validate。方便调用。 是基于laravel ...
分类：
其他好文 时间：
2020-09-17 17:34:31
阅读次数：
24
