sqoop 是什么? sqoop 主要用于异构数据: 1. 将数据从hadoop,hive 导入、导出到关系型数据库mysql 等; 2. 将关系型数据库 mysql 中数据导入、导出到 hadoop 、hve 。 sqoop 版本说明 sqoop 1 版本主要从1.4.0 到 1.4.7;sqoo ...
分类:
其他好文 时间:
2020-02-17 18:03:50
阅读次数:
58
Elasticsearch(ES)是一个基于Lucene构建开源分布式搜索引擎并提供Restful接口。 Es是一个分布式文档数据库(JSON数据格式存储,类似MongoDB),JSON中的每个字段数据都可作为搜索条件,并且能够扩展至数以百计的服务器存储以及处理PB(PetaByte)级的数据。可在 ...
分类:
其他好文 时间:
2020-02-17 11:52:56
阅读次数:
74
第一部分 悲观锁 1 概念(来自百科) 悲观锁,正如其名,它指的是对数据被外界(包括当前系统的其它事务,以及来自外部系统的事务处理)修改持保守态度,因此,在整个数据处理过程中,将数据处于锁定状态。悲观锁的实现,往往依靠数据库提供的锁机制(也只有数据库层提供的锁机制才能真正保证数据访问的排它性,否则, ...
分类:
数据库 时间:
2020-02-15 13:30:28
阅读次数:
71
1. 从Spring Boot下载项目 https://spring.io/guides/gs/accessing-data-mysql/ 2. 配置Spring Boot连接MySQL(位置:resources/application.properties) spring.jpa.hibernat ...
分类:
数据库 时间:
2020-02-13 21:15:32
阅读次数:
87
在K8s中将Pod调度到某一台Node节点之后,后续的状态维护信息则是由对应机器上的kubelet进行维护,如何实时反馈本地运行状态,并通知apiserver则是设计的难点, 本节主要是通过感知Pod状态变化和探测状态改变两个流程来实际分析其核心数据结构,来了解内部设计
分类:
Web程序 时间:
2020-02-13 17:30:58
阅读次数:
92
unix_timestamp的用法: unix_timestamp(String str) 如果参数str格式满足yyyy-MM-DD HH:mm:ss格式,例如:str值为2020-02-02 02:02:02,用法为 select unix_timestamp(2020-02-02 02:02: ...
分类:
其他好文 时间:
2020-02-12 13:19:55
阅读次数:
181
1、Thu Mar 07 2019 12:00:00 GMT+0800 (中国标准时间) 转换为 2019-03-07 12:00:00 const d = new Date(Thu Mar 07 2019 12:00:00 GMT+0800 (中国标准时间))const resDate = d.g ...
分类:
其他好文 时间:
2020-02-11 15:59:56
阅读次数:
2593
@ "TOC" 问题出现过程: 开发过程中,有个接口使用了php 中 sha1加密的方式,我在使用postman请求的时候,需要用post方式传一个 动态的时间戳(当前时间) [timestamp], 随机数 [random], 密钥 [secretKey]给这个接口,验证通过才能返回接口的数据。所 ...
分类:
Web程序 时间:
2020-02-11 00:16:55
阅读次数:
138
参考:https://blog.csdn.net/wyyyh9458/article/details/83550505和https://www.v2ex.com/amp/t/618547 看代码应该是谢大神写的;另,我没有修改 go.mod,类似: `github.com/mattn/go-sqli ...
分类:
数据库 时间:
2020-02-10 13:50:15
阅读次数:
107
[toc] 所谓的时刻数据代表时间点,是pandas的数据类型,是将值与时间点相关联的最基本类型的时间序列数据。 1.Timestamp 是将数据类型转化为pandas的Timestamp类型 2.to_datetime 也是将数据类转化为pandas的Timestamp类型,但是如果是多个时间,则 ...
分类:
编程语言 时间:
2020-02-08 15:39:29
阅读次数:
101