# 先定义dataframe各列的数据类型 from pyspark.sql.types import *schema = StructType([ StructField("a", NullType(), True), StructField("b", AtomicType(), True), S ...
分类：
其他好文 时间：
2021-01-18 11:29:36
阅读次数：
0
package test;import java.sql.*;public class retrieve { public static void main(String[] args) { try { Class.forName("com.mysql.jdbc.Driver"); } catch ...
分类：
数据库 时间：
2021-01-18 11:27:02
阅读次数：
0
1.数据格式 1 2 x2 2 x3 2 x4 2 x 2.创建表 创建TEXTFILE格式的表 CREATE TABLE test_txt(id int,num int,txt string) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' LINES ...
分类：
其他好文 时间：
2021-01-18 10:51:25
阅读次数：
0
1. 设置执行引擎 set hive.execution.engine=mr;set hive.execution.engine=spark; 如果设置执行引擎为MR，那么调用Hadoop的maprecude来运行需要执行的job的程序； 如果设置执行引擎为spark，那么就会调用spark来执行任 ...
分类：
其他好文 时间：
2021-01-15 12:15:21
阅读次数：
0
#项目结果： #构建对应数据库类型的类 样例的学生数据库比较简单，只有学号，姓名，年龄3个属性.对应的类也需要写出3种属性（用类的原因是后面可以包装成List操作方便） /* * To change this license header, choose License Headers in Pro ...
分类：
数据库 时间：
2021-01-14 10:45:42
阅读次数：
0
Spring框架之jdbc源码完全解析 Spring JDBC抽象框架所带来的价值将在以下几个方面得以体现： 1、指定数据库连接参数 2、打开数据库连接 3、声明SQL语句 4、预编译并执行SQL语句 5、遍历查询结果（如果需要的话） 6、处理每一次遍历操作 7、处理抛出的任何异常 8、处理事务 9 ...
分类：
数据库 时间：
2021-01-13 11:19:22
阅读次数：
0
工作中有一张类型信息表，有时候需要不同的类型信息需要多次扫描这张表，表很大的时候影响效率。 优化前： select t1.fa_id,t2.srch_char_val,t3.srch_char_val from (select fa_id from cisadm_ods.ods_cis_ci_fa_ ...
分类：
其他好文 时间：
2021-01-13 10:40:03
阅读次数：
0
我们知道所有的驱动程序其实都是实现相同的JDK接口来连接数据库。这些接口其实就是JDBC接口。 那我们就从JDBC连接来看mysql驱动是怎么实现这些接口来连接数据库的。 首先写了一个简单的数据库连接程序，和mysql 建立连接 当前使用的mysql驱动是 mysql-connector-java- ...
分类：
数据库 时间：
2021-01-12 11:09:37
阅读次数：
0
ResultSet的Type属性TYPE_FORWARD_ONLY, TYPE_SCROLL_INSENSITIVE,or TYPE_SCROLL_SENSITIVE解释：1.TYPE_FORWORD_ONLY,只可向前滚动；2.TYPE_SCROLL_INSENSITIVE,双向滚动，但不及时更新 ...
分类：
数据库 时间：
2021-01-12 10:42:40
阅读次数：
0
1. 4.小彩蛋 1.最早开始使用的分布式事务解决方案是什么？ 2.TCC分别代表的是什么意思？ 3.蚂蚁金服使用的是哪个模式？ 4.同服务器不同数据库远程调用api，会有分布式事务吗？ 5.提高题：如果在try阶段只在代码中判断资源是否充足，而不更新到数据库中，这样减少一次JDBC，这样可以吗？会 ...
分类：
其他好文 时间：
2021-01-12 10:41:10
阅读次数：
0
