需求: 做数据仓库时,需要将业务系统CRM抽取到数据仓库的缓冲层,业务系统使用的是SqlServer数据库,数据仓库的缓冲层使用的是mysql数据库,为实现数据库的迁移,即将SqlServer数据库中的所有表与数据迁移到Mysql。 解决办法一:利用kettle的复制多表复制向导 过程如下: 1、选 ...
分类:
数据库 时间:
2020-05-09 19:11:54
阅读次数:
156
引自:JNDI的本质及作用 JNDI的一篇文章 前端时间总是在搞不清JNDI到底是干什么,虽然是一值在用,却不知道他最初出现的原因,用来,说不清是用来干什么,下面我相信这篇文章能解开这个迷雾里。 【转贴一篇】 JNDI是 Java 命名与目录接口(Java Naming and Directory ...
分类:
其他好文 时间:
2020-05-09 18:44:15
阅读次数:
61
团队项目进行情况 1.昨日进展 Alpha冲刺第八天 昨日进展: + 前端:安排页面美化,设计实名认证 + 后端:用户信息通过dao层存储数据库 + 数据库:修改数据表属性,与后端部署数据库交互 2.今日安排 + 前端:继续界面美化,继续编码实名认证的业务逻辑 + 后端:处理存在的异常问题并设计数据 ...
分类:
其他好文 时间:
2020-05-08 23:06:13
阅读次数:
163
背景 可用性(Availability)和一致性(Consistency)是分布式系统的基本问题,先有著名的CAP理论定义过分布式环境下二者不可兼得的关系,又有神秘的Paxos协议号称是史上最简单的分布式系统一致性算法并获得图灵奖,再有开源产品ZooKeeper实现的ZAB协议号称超越Paxos。 ...
分类:
数据库 时间:
2020-05-07 13:20:48
阅读次数:
120
处理大数据量数据访问速度缓慢的问题 方案1 水平分库分表,比如根据年份划分, 数据库、 数据库等等 查询的时候根据查询时间,去不同的数据库查询,然后组合结果返回 示例代码 "HistoricalDataManage" 方案2 建立 和`实时数据库`,历史数据库存储所有数据,实时数据库仅保留常用数据 ...
分类:
其他好文 时间:
2020-05-06 21:35:33
阅读次数:
89
数据库演变过程 随意的存储到文件中,存储的格式也取决于自己 软件开发目录规范——初步规范存储位置(单机) 数据库——基于网络通讯的一个应用程序 数据库 本质:一款基于网络通讯的应用程序 关系型数据库: 彼此之间有关系或者约束 存储数据的表现形式往往是表格的形式 name password hobby ...
分类:
数据库 时间:
2020-05-04 20:58:21
阅读次数:
72
[toc] MySQL数据库 1 数据库的了解 1.1 存储数据的演变过程 随意的存到一个文件中、数据格式也是千差万别的,格式完全取决于我们自己 软件开发目录规范 限制了存储数据的具体位置 不同计算机数据的互通 1.2 数据库的本质 2 MySQL数据库简介 2.1 重要概念介绍 2.2 MySQL ...
分类:
数据库 时间:
2020-05-03 21:32:10
阅读次数:
80
数据库 数据库存放数据的仓库 方便存储快速查找 数据按照一定格式可为用户共享 DataBase数据库单词 数据库管理系统 MySQL被甲骨文收购,开源代码安全性不高,源代码容易修改,有些公司可以对MySQL进项重构,就可以变成不开源版,让数据有了保障 oracleMySQL中的漏洞都被修复了,比My ...
分类:
数据库 时间:
2020-05-03 14:30:15
阅读次数:
67
十、nginx反向代理负载均衡 (一)LNMP架构迁移数据库说明 迁移数据库:利用数据库备份命令(mysql mysqladmin mysqldump) 1) 备份数据库数据库信息 2) 恢复数据库数据库信 第四里程:在负载均衡服务器上,进行测试访问 ②. 部署负载均衡服务器 第一个里程:安装部署n ...
分类:
系统相关 时间:
2020-05-03 01:23:16
阅读次数:
100
1. 数据存储 超大文本,或者图片、视频等二进制文件避免直接存储在数据库。 2.数据访问 减少数据库访问;实时性要求不高、不常变化的数据;通过cache提示系统性能,减少数据库压力。 减少无用数据的查询。 3.硬件影响 并发量高,但每次访问数据量小,对CPU处理能力、核数要求比较高。 并发量低,但是 ...
分类:
数据库 时间:
2020-05-02 23:17:57
阅读次数:
126