1.Hive不存储数据，Hive需要分析计算的数据，以及计算结果后的数据实际存储在分布式系统上，如HDFS上。 2.Hive某种程度来说也不进行数据计算，只是个解释器，只是将用户需要对数据处理的逻辑，通过SQL编程提交后解释成MapReduce程序，然后将这个MR程序提交给Yarn进行调度执行。所以 ...
分类：
数据库 时间：
2019-04-12 10:29:18
阅读次数：
238
今下午在课上没有将实验做完，课下进行了补充，最终完成。下面附上厦门大学数据库实验室中spark实验官网提供的标准答案，以供参考。 三、实验内容和要求 1．Spark SQL 基本操作 将下列 json 数据复制到你的 ubuntu 系统/usr/local/spark 下，并保存命名为 employ ...
分类：
数据库 时间：
2019-03-26 22:41:02
阅读次数：
362
1.题目： 源码： 数据库数据： 结果： 2.编程实现将 RDD 转换为 DataFrame 官网给出两种方法，这里给出一种（使用编程接口，构造一个 schema 并将其应用在已知的 RDD 上。）： 源码： 结果： ...
分类：
数据库 时间：
2019-03-26 21:13:29
阅读次数：
310
1．Spark SQL 基本操作 将下列 JSON 格式数据复制到 Linux 系统中，并保存命名为 employee.json。 { "id":1 , "name":" Ella" , "age":36 } { "id":2, "name":"Bob","age":29 } { "id":3 , ...
分类：
数据库 时间：
2019-03-26 19:51:08
阅读次数：
359
AOP：面向切面编程 通过 预编译方式 和 运行期动态代理 实现程序功能的统一维护的一种技术。 利用AOP可以对业务逻辑的各个部分进行隔离，从而使得业务逻辑各部分之间的耦合降低，提高程序的可重用性，同时提高了开发效率。 通过 预编译方式 和 运行期动态代理 实现程序功能的统一维护的一种技术。 利用A ...
分类：
其他好文 时间：
2019-03-01 12:16:30
阅读次数：
212
Q：有一个学生成绩表，表名 stu（学生表），字段有：id（主键），name（学生姓名），subject（学科），score（分数） 1、查询该表中，所有科目都及格的学生 说明：都及格的话，就是最低分是60以上 2、查询该表中，每门科目的前两名 说明：使用存储过程处理，不过该方法风险不可控 3、查询 ...
分类：
数据库 时间：
2019-02-22 15:21:26
阅读次数：
255
一. 表 在关系数据库中，数据库表是一系列二维数组的集合，用来存储数据和操作数据的逻辑结构。它由纵向的列和横向的行组成，行被称为记录，是组织数据的单位；列被称为字段，每一列标识记录的一个属性，都有相应的描述信息，如数据类型、数据宽度等。 二. 数据类型 数据类型决定了数据在计算机中的存储格式，代表不 ...
分类：
数据库 时间：
2019-01-23 15:31:52
阅读次数：
161
1.什么是子查询? 当一个查询是另一个查询的条件时，称之为子查询。子查 询可以使用几个简单命令构造功能强大的复合命令。子查询最常用于SELECT-SQL命令的 WHERE子句中。子查询是一个 SELECT 语句，它嵌套在一个 SELECT、SELECT...INTO 语句、INSERT...INTO ...
分类：
数据库 时间：
2018-12-30 02:32:01
阅读次数：
183
PL/SQL高级编程实验目的： 1、掌握PL/SQL的数据结构和编程结构，掌握应用PL/SQL编写简单程序的方法 2、理解存储过程的概念，掌握编写存储过程的方法 3、理解函数的概念，掌握编写存储过程的方法实验内容：一、PL/SQL编程基础1、pl/sql的组成：声明块、执行块、异常处理块2、编制代码 ...
分类：
数据库 时间：
2018-11-17 20:45:37
阅读次数：
191
现在在公司担任数据库开发工程师一职位，主要工作是根据业务写MSSQL的存储过程，可以学到SQLService的SQL编程,会使用系统函数，系统表，系统存储过程，临时表的使用，以及各种SQL（DML,DDL等），会根据不同的业务情况，组装不同的SQL语句，使用各种SQL技巧得到想要的数据！好了，技术并不难，难点是在业务需求的沟通和交流，以及对业务知识的理解，感谢公司给我这份工作，不过公司对这个岗位的
分类：
数据库 时间：
2018-11-13 00:10:36
阅读次数：
228
