我最近研究了hive的相关技术,有点心得,这里和大家分享下。 首先我们要知道hive到底是做什么的。下面这几段文字很好的描述了hive的特性: 1.hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能,可以将sql语句转换为MapRedu ...
分类:
其他好文 时间:
2019-10-16 09:56:12
阅读次数:
101
地铁个人项目 主要功能 编写一个程序实现北京地铁最短乘坐(站)线路查询,输入为起始站名和目的站名,输出为从起始站到目的站的最短乘坐站换乘线路。 数据输入格式 文件bgstations.txt为数据文件,包含了北京地铁的线路及车站信息。其格式如下: 例如演示代码输入的数据形式: 打开当前目录下文件bg ...
分类:
其他好文 时间:
2019-10-15 00:15:14
阅读次数:
97
个人git 一、项目需求 1.该程序能够准确地读出.txt文件中的数据,文件格式简洁易懂、可灵活扩展 2.在某号线路上,能够查询各个站点的信息,输出该号线路上所有站点信息 3.在出发站与目的站之间输出一个最短路径 二、文件存储 三、文件位置 一共三个package:control、main、mode ...
分类:
其他好文 时间:
2019-10-14 23:55:55
阅读次数:
156
linux下误删mysql的root用户,解决方法 开始对liunx界面不熟悉,可能由于不小心,把root误删了,怎么办? 1. # killall mysqld 干掉所有mysql进程 2. # mysqld_safe --skip-grant-tables & 进入mysql安全模式 3. 通过 ...
分类:
数据库 时间:
2019-10-14 12:10:54
阅读次数:
104
文件格式.xls 代码展示: //集合列表 IList<ProjectStatuStat> projectStatuStats = new List<ProjectStatuStat>(); //取根目录下的excel string absPath = HttpContext.Current.Ser ...
分类:
Web程序 时间:
2019-10-14 10:24:22
阅读次数:
164
tensorflow 数据读取 队列和线程 文件读取, 图片处理 问题:大文件读取,读取速度, 在tensorflow中真正的多线程 子线程读取数据 向队列放数据(如每次100个),主线程学习,不用全部数据读取后,开始学习 队列与对垒管理器,线程与协调器 tf.FIFOQueue(capacity= ...
分类:
其他好文 时间:
2019-10-13 14:49:19
阅读次数:
92
主要学习的内容包括发送HTTP请求、HTTP信息头管理器、HTTP cookies管理器、用户定义的变量、响应断言、CSV数据文件设置的使用。 一.测试相关网站及接口说明: 提供的测试网址为:http://www.qk365.com/security/register 使用Chrome浏览器,先将浏 ...
分类:
其他好文 时间:
2019-10-13 13:12:25
阅读次数:
115
一、示意图 注:Car car2 = new Car; 其中car1作为引用类型变量,保存在Java栈,而对象本身保存在堆中。类加载器只负责将.class文件加载到内存中,此后JVM将根据这个数据文件封装成对应的数据结构(类对象),虽然类对象也是对象,但是HotSpot虚拟机将其放在了方法区中。 二 ...
分类:
其他好文 时间:
2019-10-12 19:01:20
阅读次数:
78
centos7中,文件保存的类型默认为.xfs类型。在日常工作中,我们会定时性的备份重要的数据文件,有时会因为操作失误或者不当,造成文件删除丢失,只要提前有备份,都是可以通过操作恢复原文件的。一、实验准备:1、在VMware虚拟机中,加一块大小为20G的磁盘sbd,将其分区为sdb1,并格式化为.xfs类型,并将其挂载到/data目录下,就可以正常使用它了。2、在data目录下,创建一个passw
分类:
其他好文 时间:
2019-10-11 21:53:00
阅读次数:
926
延时从库 主从复制很好的解决了物理损坏,但是如果主库有个误删除写入的操作怎么办? 正常情况下从库也会同步这个错误的,企业中应该怎么避免这个情况?这个时候就需要使用延时同步来解决: 延时从库?delay(延时)从节点同步数据。 对SQL线程进行延时设置。IO线程正常的执行。企业中一般延迟3-6小时 延 ...
分类:
数据库 时间:
2019-10-11 01:11:05
阅读次数:
141