一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop,启动hive 3.创建数据库,创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果 二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本 ...
分类:
其他好文 时间:
2020-12-10 10:55:10
阅读次数:
3
【Markdown/博客】本地md文件直接发表博客 本文转自:https://www.cnblogs.com/antaia11/p/14091010.html 软件安装 安装python3环境 安装Typora:https://typora.io/#windows 安装pycnblog:https: ...
分类:
其他好文 时间:
2020-12-10 10:52:48
阅读次数:
4
豆子最近在忙着做服务器的迁移,大概有20多个站点的服务器都需要迁移到AWS上去。说说自己的心得和一点浅见。几年前我最开始使用的传统的迁移方式是VMImport/Export,这个简单的说就是上传虚拟机文件到S3bucket上,然后通过Import的命令转换成AMI镜像,最后通过镜像生成EC2实例。这个确实工作,就是宕机时间太长了,没有一天的时间别想弄完;后来呢,很多第三方的备份软件都支持还原到EC
分类:
其他好文 时间:
2020-12-10 10:36:25
阅读次数:
1
SERT...SELECT语句1.INSERT[LOW_PRIORITY|HIGH_PRIORITY][IGNORE]2.[INTO]tbl_name3.[PARTITION(partition_name[,partition_name]...)]4.[(col_name[,col_name]...)]5.{SELECT...|TABLEtable_name}6.[ONDUPLICATEKEYUP
分类:
数据库 时间:
2020-12-10 10:34:04
阅读次数:
2
INSERT语句1.INSERT[LOW_PRIORITY|DELAYED|HIGH_PRIORITY][IGNORE]2.[INTO]tbl_name3.[PARTITION(partition_name[,partition_name]...)]4.[(col_name[,col_name]...)]5.{{VALUES|VALUE}(value_list)[,(value_list)]...
分类:
数据库 时间:
2020-12-10 10:33:43
阅读次数:
3
使用idea操作HDFS、创建文件、上传文件、获取块信息、下载文件 1.搭建maven工程 2.pom依赖 <!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-common --> <dependency> <groupI ...
分类:
其他好文 时间:
2020-12-09 12:24:14
阅读次数:
6
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理 以下文章来源于腾讯云 作者:Python编程与实战 ( 想要学习Python?Python学习交流群:1039649593,满足你的需求,资料都已经上传群文件流,可以自行下载!还有海 ...
分类:
编程语言 时间:
2020-12-09 11:44:10
阅读次数:
16
前言前面我们讲过二层以太网Ethernet协议,你知道以太网数据帧在网络中如何发送和接收的吗?一文带你搞懂它,用于实现数据链路层数据帧的封装,今天我们讲下数据链路层的另一个协议——PPP。以太网协议用在局域网中,一般使用以太网口进行互联;广域网中经常会使用串行链路来提供远距离的数据传输,高级数据链路控制HDLC(High-LevelDataLinkControl)和点对点协议PPP(Pointto
分类:
其他好文 时间:
2020-12-08 12:52:40
阅读次数:
5
1目标场景无论是抖音还是快手等视频平台,一旦一个视频火了后,很多UP主都会争先抢后去模仿拍摄或剪辑,然后上传到平台,最后都能带来不错的流量。对于一般的短视频,完全可以通过裁剪、特效转场、加入混合图层和字幕等一系列操作,很快就能制作出一个全新的视频,这些操作完全可以使用Python来实现。本篇文章的目的是带大家利用Python实现短视频的二次创作。2编写代码要实现短视频的二次创作,一般需要下面7个步
分类:
编程语言 时间:
2020-12-08 12:11:09
阅读次数:
5
对于Android端的自动化测试,ADB的重要性不言而喻,很多开源的自动化框架操作大都是利用ADB命令来完成。下面对ADB在平时自动化操作过程中一些问题做一个汇总。1、ADB简介ADB全称:AndroidDebugBridge,是一种命令行工具,方便PC端和手机端进行通信。只需要去官网下载AndroidSDK,然后根据ADB文件的路径配置环境变量即可。2、连接设备进入设置里的开发者选项,开启开发者
分类:
数据库 时间:
2020-12-08 12:04:47
阅读次数:
6