大数据查询引擎Presto简介SQLonHadoop：Hive的出现让技术人员可以通过类SQL的方式对批量数据进行查询，而不用开发MapReduce程序MapReduce计算过程中大量的中间结果磁盘落地使运行效率较低为了提高SQLonHadoop的效率，各大工具应运而生，比如Shark、Impala等SQLonHadoop的常见工具：Presto是什么：Presto是由Facebook开发的分布式
分类：
数据库 时间：
2020-11-21 12:01:11
阅读次数：
8
漫画：什么是Bitmap算法？两个月之前——为满足用户标签的统计需求，小灰利用Mysql设计了如下的表结构，每一个维度的标签都对应着Mysql表的一列：要想统计所有90后的程序员该怎么做呢？用一条求交集的SQL语句即可：Selectcount（distinctName）as用户数fromtablewhareage=‘90后‘andOccupation=‘程序员‘;要
分类：
编程语言 时间：
2020-11-20 11:17:51
阅读次数：
7
看到标题就已经很明了了： 两种情况： 1.你想查询一条数据，但返回两条数据： 2.你想查询多条数据，但是前台限制只能查询一条 (1) 检查自己的数据sql语句写对没有（关于mybaties的sql操作自己百度） (2) 查看mybaties的返回值（resultType或resultMap），可以返 ...
分类：
其他好文 时间：
2020-11-19 12:23:18
阅读次数：
7
一、缘起（1）并发量大，流量大的互联网架构，一般来说，数据库上层都有一个服务层，服务层记录了“业务库名”与“数据库实例”的映射关系，通过数据库连接池向数据库路由sql语句以执行：如上图：服务层配置用户库user对应的数据库实例物理位置为ip（其实是一个内网域名）。（2）随着数据量的增大，数据要进行水平切分，分库后将数据分布到不同的数据库实例（甚至物理机器）上，以达到降低数据量，增强性能的扩容目的：
分类：
数据库 时间：
2020-11-18 13:09:39
阅读次数：
15
MySQL的InnoDB的细粒度行锁，是它最吸引人的特性之一。但是，如《InnoDB，5项最佳实践》所述，如果查询没有命中索引，也将退化为表锁。InnoDB的细粒度锁，是实现在索引记录上的。一，InnoDB的索引InnoDB的索引有两类索引，聚集索引(ClusteredIndex)与普通索引(SecondaryIndex)。InnoDB的每一个表都会有聚集索引：(1)如果表定义了PK，则PK就是聚
分类：
数据库 时间：
2020-11-17 12:04:17
阅读次数：
11
技术总结： 1、动态SQL:if 语句 根据 username 和 sex 来查询数据。如果username为空，那么将只根据sex来查询；反之只根据username来查询 首先不使用 动态SQL 来书写 <select id="selectUserByUsernameAndSex" resultT ...
分类：
数据库 时间：
2020-11-16 13:51:36
阅读次数：
8
在Java开发中，持久层最常用的框架就是mybatis，该框架需要编写sql语句，mybatis官方提供逆向工程，可以把数据表自动生成执行所需要的基础代码，例如：mapper接口，sql映射文件，pojo实体类等，避免基础代码维护的繁杂过程。
分类：
其他好文 时间：
2020-11-13 12:07:03
阅读次数：
8
时间飞逝，距离6月底的汇总文《架构师之路，半年文章50篇精选》又过去了3个月。画外音：上半年系统性的写了一些底层硬核、ServiceMesh、架构设计、算法、数据库、业务实践、带队作战、一分钟系列的文章，欢迎点击上述标题阅读。如果大伙有错过的文章，本文是一个很好的补课机会。数据库实践：《两类非常隐蔽的全表扫描，不能命中索引》《数据库允许空值(null)，往往是悲剧的开始》《同一个SQL语句，为啥性
分类：
其他好文 时间：
2020-11-10 11:34:05
阅读次数：
12
1. 导致性能下降的原因 数据过多 → 分库分表 索引（单值、复合）失效 → 索引建立 关联查询太多 Join // 设计缺陷、不得已的需求 → SQL 优化 服务器调优及各个参数设置（缓冲、线程数等）→ 调整 my.cnf 2. RE: Join 查询 3. 索引简介 3.1 是什么？ 【官方定义 ...
分类：
其他好文 时间：
2020-11-10 10:52:16
阅读次数：
3
打开后为常见login界面 → 检查robots.txt泄露 → 得到user.php.bak 注册账号后发现 /view.php?no=1 更改传参类型后出现SQL语句报错?no=1' ?no=abc 暴露文件路径?no=2 利用报错注入 ?no=1 and extractvalue(1,conc ...
分类：
其他好文 时间：
2020-11-08 17:23:34
阅读次数：
22
