Hive架构hive架构如图所示,client跟driver交互,通过parser、planner、optimizer,最后转为mapreduce运行,具体步骤如下driver输入一条sql,会由parser转为抽象语法树AST,这个是没有任务元数据信息的语法树;语法分析器再把AST转为一个一个的QueryBlock,一个QueryBlock包含输入、输出、计算逻辑,也就是说一个子程序就是Quer
分类:
数据库 时间:
2019-05-17 09:20:50
阅读次数:
142
数据库的由来 : 1数据只是程序运行的一部分 程序的组件不能放在一台机器上 2数据安全性 3支持并发数据管理技术的发展历程:1 人工管理 临时用 临时输入 不保存2 文件系统管理 有硬盘磁盘等存储介质3 数据系统管理 i 数据结构化 ii 数据共享,冗余度低,易扩充 iii数据独立性高 iv 数据由 ...
分类:
数据库 时间:
2019-05-14 20:44:57
阅读次数:
195
数码复印机部分型号具备存储功能,用户复印、扫描文件可以存储在复印机上的硬盘中。
带存储功能的复印机,有的型号具有网络共享文件夹功能,可以通过局域网把文件copy到复印机的共享目录中。如:\\复印机ip\share 就能访问复印机上的共享文件夹内容
带存储功能的复印机,跟普通计算机一样存在数据泄密风险!
分类:
其他好文 时间:
2019-05-14 16:23:37
阅读次数:
150
信息图通过图片,把文字内容和数据信息重新组合,衬上一些好看的图案,形成像画卷般赏心悦目的内容,能为读者带来一种享受感的轻量化阅读体验。 信息图的特点是以简洁的方式和以数据为核心的理念,去传递信息。有些美观、富有创意的信息图往往令人爱不释手,有效的信息图表达出来的信息容易被读者接受并分享,传递给更多的 ...
分类:
其他好文 时间:
2019-05-14 15:06:06
阅读次数:
535
信息图通过图片,把文字内容和数据信息重新组合,衬上一些好看的图案,形成像画卷般赏心悦目的内容,能为读者带来一种享受感的轻量化阅读体验。 信息图的特点是以简洁的方式和以数据为核心的理念,去传递信息。有些美观、富有创意的信息图往往令人爱不释手,有效的信息图表达出来的信息容易被读者接受并分享,传递给更多的 ...
分类:
其他好文 时间:
2019-05-14 15:03:33
阅读次数:
198
信息图通过图片,把文字内容和数据信息重新组合,衬上一些好看的图案,形成像画卷般赏心悦目的内容,能为读者带来一种享受感的轻量化阅读体验。 信息图的特点是以简洁的方式和以数据为核心的理念,去传递信息。有些美观、富有创意的信息图往往令人爱不释手,有效的信息图表达出来的信息容易被读者接受并分享,传递给更多的 ...
分类:
其他好文 时间:
2019-05-14 14:53:33
阅读次数:
164
scrapy startproject ZuCai 会自动生成2个zucai文件夹 cd ZuCai cd ZuCai 进入最下面的ZuCai文件夹 scrapy genspider zucai trade.500.com/jczq/ 开始分析 https://trade.500.com/jczq/ ...
分类:
其他好文 时间:
2019-05-14 13:01:03
阅读次数:
302
1、明确分析目标:多年来犯罪如何变化?是否有可能预测犯罪将在何时何地发生?在这段时间内,这个城市的哪些地区已经发生了变化? 2、针对以上目标,主要根据:犯罪时间 Date、犯罪类型 Primary Type 、逮捕情况 Arrest、犯罪地点 location_description(所属社区 co ...
分类:
其他好文 时间:
2019-05-13 14:40:52
阅读次数:
569
五一假期后的第一周,意识到两个问题: 1、如果说我们正处于DT时代,那为什么不在工作之余多关注做点这方面的事让自己积极主动参与进去呢? 2、AI越来越普及化的今天,人的核心能力之一就是做出判断决策,基于掌握的各种数据信息,做出最利于当下或未来的决策。而决策能力也可以想其它能力一样通过刻意练习训练提高 ...
分类:
其他好文 时间:
2019-05-12 10:22:40
阅读次数:
117
一、什么是事务 数据库中的概念,按我个人理解:能够保证一组任务全部执行成功或者全部执行失败的这么个机制,叫事务 事务是数据库中重要概念,如果没有这种保障机制,数据库中的数据就是不安全的(就是无法保证数据的正确性) 在数据库中,一组任务,就是放在一起执行的多条sql 二、ACID保证数据安全 所以如何 ...
分类:
数据库 时间:
2019-05-11 17:49:00
阅读次数:
154