什么是MyCat*一个彻底开源的，面向企业应用开发的大数据库集群*支持事务、ACID、可以替代MySQL的加强版数据库*一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群*一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQLServer*结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品*一个新颖的数据库中间件产品为什么使用MyCat如今随着互联网的发展，
分类：
数据库 时间：
2020-07-19 11:27:26
阅读次数：
86
（简答题）1.如果让你来设计数据仓库并搭建相关可视化报表,你会考虑哪些问题。 1. 数据推送方式与批次，是推送增量还是推送全量，是一天一次还是一天两次；2. 推送全量的就全删全插，推送增量的涉及到时间拉链的取法，是滚动时间还是平滑时间；3. 多次推送的还涉及到数据去重的问题；4. 从源端推送过来的数 ...
分类：
其他好文 时间：
2020-07-15 10:45:58
阅读次数：
180
今天无意在简书看到一篇文章题目是 数据仓库灵魂30问，感觉这写问题确实需要总结和归纳，先做个标记，后续整理答案。 1.什么是数据仓库？如何构建数据仓库？（如果这个问题回答的好，后面很多问题都不需要再问） 2.如何建设数据中台？可简单说下理解与思路 3.数据仓库、数据中台、数据湖的理解 4.传统数仓的 ...
分类：
其他好文 时间：
2020-07-11 22:44:51
阅读次数：
86
Hive数据仓库 Facebook由hive和Hadoop组建 hive由facebook开发的 存储HDFS，查询MapReduce 优势 解决了传统关系型数据库在大数据处理上的瓶颈。适合大数据批量处理 充分利用集群的CPU计算资源，存储资源，实现并行计算 Hive支持标准的SQL语法，免去了编写 ...
分类：
其他好文 时间：
2020-07-10 19:33:44
阅读次数：
77
初识MySQL JavaEE：企业级开发 web 前端（页面：展示，数据） 后台（连接点：连接数据库JDBC，链接前端(控制，控制视图跳转,和给前端传递数据)） 数据库（存数据） 数据库 DB database 概念：数据仓库，软件，安装在操作系统（windows，linux，mac...）之上 作 ...
分类：
数据库 时间：
2020-07-09 22:49:50
阅读次数：
110
本次课程就正式进入开发部分。 首先我们先搭建项目框架，还是和之前渐进式风格保持一致，除必备组件外，尽量使用原生功能以方便大家理解。 开发工具：vs 2019 或以上 数据库：SQL SERVER 2017 或以上 其他需要用到的我们在项目过程中再提。 一、新建 MVC项目 1、打开VS 2019，C ...
分类：
Web程序 时间：
2020-07-07 10:23:43
阅读次数：
109
数据在当今世界意味着金钱。随着向基于app的世界的过渡，数据呈指数增长。然而，大多数数据是非结构化的，因此需要一个过程和方法从数据中提取有用的信息，并将其转换为可理解的和可用的形式。数据挖掘或“数据库中的知识发现”是通过人工智能、机器学习、统计和数据库系统发现大数据集中的模式的过程。免费的数据挖掘工具包括从完整的模型开发环境如Knime和Orange，到各种用Java、c++编写的库，最常见的是P
分类：
其他好文 时间：
2020-07-04 09:12:57
阅读次数：
975
GMV指标获取的全调度流程 import.job文件，第一步，从mysql导入数据 type=command do_date=${dt} command=/home/atguigu/bin/sqoop_import.sh all ${do_date} ods.job文件 type=command d ...
分类：
其他好文 时间：
2020-07-03 01:04:27
阅读次数：
73
大数据开发的最后一环，将数仓中ADS层的数据，导出到MySql，剩下就是Java工程师的事了。 1 在MySql中创建对应的ADS表，字段和类型与数仓中的表一致，略。 2 数据导出脚本。 ①--update-mode updateonly：只更新，无法插入新数据。 allowinsert：允许新增 ...
分类：
数据库 时间：
2020-07-02 23:16:56
阅读次数：
81
分析： 完成品牌复购率需要建立一个宽表，宽表里面包括用户信息，商品信息，以及此商品购买的个数，即一个订单，根据订单里面的商品id不同，可能有多条这样的宽表记录。 有了宽表后，再做相应的统计工作。 一 用户购买商品明细表（宽表） 建表语句： 订单详情表数据量较大，采用分区表。 drop table i ...
分类：
其他好文 时间：
2020-07-02 18:02:20
阅读次数：
78
