古时的风筝第70篇原创文章今天来说一个最近遇到的小需求，不是什么高大上的需求，当然也就谈不上什么技术深度。其实，大多数时候，我们的日常开发就是由这些不起眼的小需求组成，而且今天要说的其实就是纯用一条SQL实现的，而这类SQL还是比较典型的。需求说明是这样的，有一个某站的数据抓取程序(当然是合法抓取啦)，每天会抓取一次固定的几百个头部大V的主要信息，主要就是粉丝数量，存储到一张MySQL表中，然后统
分类：
数据库 时间：
2020-08-28 14:53:44
阅读次数：
70
1 表的分类 1.1 实体表 实体表，一般是指一个现实存在的业务对象，比如用户，商品，商家，销售员等等。 用户表： 用户id 姓名 生日 性别 邮箱 用户等级 创建时间 1 张三 2011-11-11 男 zs@163.com 2 2018-11-11 2 李四 2011-11-11 女 ls@16 ...
分类：
其他好文 时间：
2020-08-28 11:48:03
阅读次数：
56
count 计数 s = ', abczjr ha,hah,\n ' print(s.count('a')) index（） 指定字符串的索引 print(s.index('a')) print(s.index('a',0,10))#指定范围 find（） 指定字符串的索引 print(s.find ...
分类：
其他好文 时间：
2020-08-27 13:01:53
阅读次数：
62
【一、项目背景】小米应用商店给用户发现最好的安卓应用和游戏,安全可靠，可是要下载东西要一个一个的搜索太麻烦了。而已速度不是很快。今天用多线程爬取小米应用商店的游戏模块。快速获取。【二、项目目标】目标：应用分类-聊天社交应用名称，应用链接，显示在控制台供用户下载。【三、涉及的库和网站】1、网址：百度搜-小米应用商店，进入官网。2、涉及的库：reques**ts、threading、queue、jso
分类：
移动开发 时间：
2020-08-26 18:56:20
阅读次数：
154
一，extract方法的使用 extract函数主要是对于数据进行提取。场景一般对于DataFrame中的一列中的数据进行提取的场合比较多。 例如一列中包含了很长的字段，我们希望在这些字段中提取出我们想要的字段时，就可以通过extract方法进行数据的提取了。 好了，废话不多说直接上代码。 数据源 ...
分类：
编程语言 时间：
2020-08-26 17:20:37
阅读次数：
104
根据老师表(teacher)，老师任课关系表(teacher2class)，课程表(class)，通过表连接，得到老师的任课结构表，如下： select t.id, t.name, c.title from teacher t left join teacher2class t2c on t.id ...
分类：
数据库 时间：
2020-08-24 15:13:06
阅读次数：
132
p_t的解出：基于历史上已经执行过的不同的 user context 累积的收益是怎么样的 3. item rec：item的执行基于上面的资源倾斜 ...
分类：
其他好文 时间：
2020-08-20 18:55:36
阅读次数：
79
接下来再走一步，让我们看看一条SQL语句的前世今生。首先看一下示例语句：SELECTDISTINCT<select_list>FROM<left_table><join_type>JOIN<right_table>ON<join_condition>WHERE<where_condition>GROUPBY<group_
分类：
数据库 时间：
2020-08-19 19:27:20
阅读次数：
75
1、概念 并行流就是把一个内容分成多个数据块，并用不同的线程分别处理每个数据块的流 Java8中将并行进行了优化，我们可以很容易的对数据进行并行操作。 Stream API可以申明性的通过parallel()与sequential()在并行流与顺序流之间进行切换 2、Fork/Join框架 2.1、 ...
分类：
编程语言 时间：
2020-08-19 19:18:14
阅读次数：
62
第1节 回顾1.1 表连接内连接：隐式、显式隐式：没有 join，使用 where显式：inner join..on外连接：左连接和右连接左连接：left outer join … on右连接：right outer join … on1.2 子查询三种情况：1) 单行单列：比较运算符：>、<、=2 ...
分类：
数据库 时间：
2020-08-18 14:02:07
阅读次数：
140
