数据集来源： https://tianchi.aliyun.com/dataset/dataDetail?dataId=649 这个数据集既能训练取数也能训练一定的业务逻辑，是个不错的项目，在这里做个学习记录 分析目的：用MySQL分析数据集，通过用户行为分析业务问题，得出针对性的运营方案 1、分析 ...
分类：
其他好文 时间：
2020-06-21 23:19:55
阅读次数：
119
去重的配置： DUPEFILTER_KEY = 'dupefilter:%(timestamp)s' DUPEFILTER_CLASS = "scrapy_redis.dupefilter.RFPDupeFilter" 调度器配置： SCHEDULER = "scrapy_redis.schedul ...
分类：
其他好文 时间：
2020-06-21 19:57:44
阅读次数：
53
Beats介绍 Beats 是轻量型数据采集器，Beats 是一个免费且开放的平台，集合了多种单一用途数据采集器。它们从成百上千或成千上万台机器和系统向 Logstash 或 Elasticsearch 发送数据。 官网：https://www.elastic.co/cn/beats/ 文档：htt ...
分类：
其他好文 时间：
2020-06-21 13:39:09
阅读次数：
71
package com.hy.fddsvr.utils; import java.io.BufferedOutputStream; import java.io.File; import java.io.FileOutputStream; import java.sql.Timestamp; imp ...
分类：
编程语言 时间：
2020-06-20 19:43:12
阅读次数：
109
程序要输出一个url，里面的格式是这样的： http://127.0.0.1:8000/api?ver=2×tamp=20200620 输入后结果变成了 http://127.0.0.1:8000/api?ver=2xtamp=20200620 也就是说浏览器自动把 × 转成了 ...
分类：
其他好文 时间：
2020-06-20 18:34:00
阅读次数：
160
1、当前时间换时间戳 var timestamp = parseInt(new Date().getTime()/1000); // 当前时间戳 document.write(timestamp); 2、当前时间换日期字符串 var now = new Date(); var yy = now.ge ...
分类：
Web程序 时间：
2020-06-20 10:21:55
阅读次数：
69
1. 下载软件包 cd /usr/local/elk/ # 先导航到要存放的目录下 wget https://artifacts.elastic.co/downloads/logstash/logstash-7.7.1.tar.gz # 下载 tar -xzf logstash-7.7.1.tar. ...
分类：
其他好文 时间：
2020-06-19 16:27:53
阅读次数：
243
各种叫法 是否ES、ElasticSearch、ELK... 这一套发家于ElasticSearch, 后来加入了Logstash + Kibana（简称ELK） 后来又加入了Beats，为了避免以后有更多部分的加入引起起名尴尬，改叫Elastic Stack Elastic Stack=Elast ...
分类：
其他好文 时间：
2020-06-19 13:38:06
阅读次数：
45
SELECT CAST(EXTRACT(EPOCH FROM CURRENT_TIMESTAMP )* 1000 AS int8),to_char(to_timestamp(CAST(EXTRACT(EPOCH FROM CURRENT_TIMESTAMP )* 1000 AS int8) / 10 ...
分类：
数据库 时间：
2020-06-18 21:51:40
阅读次数：
178
获取凌晨时间 # 方法一 获取凌晨时间戳import timeimport datetime # 思路特别简单 dt = time.strftime("%Y-%m-%d")print(dt) # 先得到前缀 2019-12-13 这种，然后在拼接成2019-12-13 00:00:00time_ar ...
分类：
编程语言 时间：
2020-06-18 19:39:26
阅读次数：
74
