1：Sqoop概述 1）官网 http://sqoop.apache.org/ 2）场景 传统型缺点，分布式存储。把传统型数据库数据迁移。 Apache Sqoop（TM）是一种用于在Apache Hadoop和结构化数据存储（如关系数据库）之间高效传输批量数据的工具 。 2：Sqoop安装部署 1 ...
分类：
其他好文 时间：
2019-05-26 00:22:46
阅读次数：
89
1.停机迁移方案 这是最简单的也是最low的迁移方案了，如果系统就算短期停机也没有关系或者造不成多大的影响，可以选用此方案。 首先停掉机器，将系统全都停掉，不要再有新的数据进来，然后使用之前写好的程序，连接旧的数据库，将旧数据库里面的数据读出来，然后通过数据分发中间件写到分库分好的数据里面去。然后修 ...
分类：
其他好文 时间：
2019-05-26 00:17:28
阅读次数：
111
应小组要求，开发测试都需要考阿里编码规范，因此，相当于是突击了一下关于编码规范方面的知识，目前做的项目后期需要进行项目迁移，数据迁移，功能迁移... 各种迁移... 阿里巴巴编码规范（Java）考试地址：https://edu.aliyun.com/course/417/lesson/list 阿里 ...
分类：
编程语言 时间：
2019-05-23 00:24:49
阅读次数：
153
架构师之路-100亿数据平滑数据迁移,不影响服务 ...
分类：
其他好文 时间：
2019-05-21 11:12:57
阅读次数：
58
KV集群的请求分发 假定N为后台服务节点数，当前台携带关键字key发起请求时，我们通常将key进行hash后采用模运算 hash(key)%N 来将请求分发到不同的节点上, 后台节点的增删会引起几乎所有key的重新映射, 这样会造成大量的数据迁移，如果数据量大的话会导致服务不可用. 一致性哈希机制 ...
分类：
其他好文 时间：
2019-05-19 00:04:41
阅读次数：
263
做数据迁移时，最稳妥的还是SQL语句 为了拼SQL写了个小工具 嗯，我懒我承认，哈哈，我就不在SQL里拼字符串，哈哈 链接: https://pan.baidu.com/s/1MiMpW1a9rzgK9cGLPMIogA 提取码: yxtc enjoy :P ...
分类：
其他好文 时间：
2019-05-13 10:50:01
阅读次数：
121
1、测试目标使用已经预置DES密钥的LKT4201N系列加密芯片完成运算2、测试环境本示例运行环境为windows系统、测试软件LCSKIT、LKT-K100开发板。3、测试步骤注意：“->”表示使用LCSKIT软件操作LKT-K100向加密芯片发送数据；“<-”表示使用LCSKIT软件操作LKT-K100读回加密芯片输出的数据。4、测试指令使用LKT4201N内部已存放的01号30密
分类：
其他好文 时间：
2019-05-10 11:32:50
阅读次数：
139
1.sqoop的概述a.sqoop 是一款工具，是appche 旗下的一款工具，主要是负责 hadoop与RDBMS之间的数据迁移，即从hadoop 文件系统 导出数据到RDBMS,从RDBMS导入数据到hadoop hdfs,hive,hbase等数据存储系统。b.其实就是将 sqoop命令转换成 ...
分类：
其他好文 时间：
2019-05-06 19:26:59
阅读次数：
129
web应用模式 在开发web应用中，有两种应用模式：1.前后端不分离 2.前后端分离 api接口 为了在团队内部形成共识、防止个人习惯差异引起的混乱，我们需要找到一种大家都觉得很好的接口实现规范，而且这种规范能够让后端写的接口，用途一目了然，减少双方之间的合作成本。 目前市面上大部分公司开发人员使用 ...
分类：
Web程序 时间：
2019-05-05 17:21:08
阅读次数：
226
原因是因为单元测试时没有加载 web.xml 中的： 所以单元测试时如果需要用到 request 中的值的话，就用静态测试数据测试就好了~ ...
分类：
编程语言 时间：
2019-05-05 11:34:37
阅读次数：
595
