本文背景: 数据挖掘过程中,需要定时爬取资料。 本文目的: 建立一个Docker的容器,并运行python脚本。 1.1 Docker介绍: Docker 是一个开源的应用容器引擎(引擎:主程序) 1.2 容器介绍: 容器(container),一种内核轻量级的操作系统层虚拟化技术。类似虚拟机。 1 ...
分类:
其他好文 时间:
2019-09-11 13:28:13
阅读次数:
81
数据在任何一家公司里面都是最核心的资产,定期备份则是为了保证数据库出现问题的时候能够及时回滚到最近的备份点,将损失缩小到最小 这篇文章将会两部分来说明:1、mysql的定期备份;2、同步到其它服务器 mysql 备份 备份还原某个数据库 备份还原 备份到压缩文件从压缩文件导入 crontab定时备份 ...
分类:
数据库 时间:
2019-09-10 10:26:10
阅读次数:
138
题目要求要求:两类机器一共300多台,写个脚本自动清理这两类机器里面的日志文件。在堡垒机批量发布,也要批量发布到crontab里面。A类机器日志存放路径很统一,B类机器日志存放路径需要用匹配(因为这个目录里除了日志外,还有其他文件,不能删除。匹配的时候可用.log)A类:/opt/cloud/log/删除7天前的B类:/opt/cloud/instances/删除15天前的要求写在一个脚本里面。不
分类:
系统相关 时间:
2019-09-09 10:33:14
阅读次数:
109
场景是这样的,在服务里利用 的`@Scheduled(cron = "${xx.run.schedule}") xx.run.schedule`变量在一个配置文件中, 服务正在运行中,现在临时想停用几天,想到的方案是修改一下变量,让他暂时不会运行,当然可以设置成几个月后执行,然后过几天再改回来,但是 ...
分类:
其他好文 时间:
2019-09-09 09:15:36
阅读次数:
369
随着网站的运行时间越来越长,日志文件也会随之越来越大需要对Nginx日志进行切割,下面是每周六晚上自动进行日志切割的shell脚本 脚本如下: [root@jrjs ~]# vim /usr/local/nginx/logbak.sh #新建脚本名为logbak.sh#!/bin/bash #解释器 ...
分类:
其他好文 时间:
2019-09-08 15:34:58
阅读次数:
126
1. cron 后台常驻程序 (daemon) 用于: A. 负责文件在网络中的共享 B. 管理打印子系统 C. 跟踪管理系统信息和错误 D. 管理系统日常任务的调度 2. 在大多数Linux发行版本中,以下哪个属于块设备 (block devices) ? A. 串行口 B. 硬盘 C. 虚拟终端 ...
分类:
系统相关 时间:
2019-09-05 13:22:25
阅读次数:
100
sed命令常见用途 1. 查找关键词做全局替换 2. 查找/etc/crontab 第17行,并且把0,30替换为15,45 3. 查找/etc/crontab 中的关键字script.sh,并且把15,45替换为0,30 4. 在第17行后添加新的 一行内容 5. 在/etc/crontab中查找 ...
分类:
系统相关 时间:
2019-09-04 18:55:35
阅读次数:
101
读取从控制台输入的值(read): 系统函数: basename:返回完整路径最后/部分,常用于获取文件名 basename [pathname] [suffix] dirname:返回完整路径最后/的前面部分,常用于返回路径部分 自定义函数: 综合案例:定时维护数据库 1、每天凌晨2:10备份数据 ...
分类:
系统相关 时间:
2019-09-04 09:35:30
阅读次数:
98
cron表达式 顺序 秒 分钟 小时 日期 月份 星期 年(可选) 取值 0-59 0-59 0-23 1-30(31) 1-12 1-7 允许特殊字符 , - * / , - * / , - * / , - * / ? L W C , - * / , - * / L # C 1970-2099 , ...
分类:
其他好文 时间:
2019-09-03 23:55:28
阅读次数:
172
如果出现了crontab定时任务不执行的情况,首先需要定位问题,那么就需要通过日志来确定问题所在。 crontab的日志位置一般位于/var/log/cron,利用下面的语句即可查看日志。 tail -f /var/log/cron /var/log/cron只会记录是否执行了某些计划的脚本,如果执 ...
分类:
其他好文 时间:
2019-09-02 11:57:21
阅读次数:
164