随着AI的发展,Python的薪资也在逐年增加,但是很多初学者会盲目乱学,连正确的学习路线都不清楚,踩很多坑,为此经过我多年开发经验以及对目前行业发展形式总结出一套最新python学习路线,帮助大家正确的学习python【总共9段】第一段:python语言基础:(带你熟悉pythonp语言的特性,学 ...
分类:
编程语言 时间:
2019-11-17 15:01:49
阅读次数:
98
5.3.1 sequenceFile读写文件、记录边界、同步点、压缩排序、格式 HDFS和MapReduce是针对大文件优化的存储文本记录,不适合二进制类型的数据。SequenceFile作为小文件的容器,SequenceFile类型将小文件包装起来,可以获得更高效率的存储和处理。sequenceF ...
分类:
编程语言 时间:
2019-11-08 09:24:43
阅读次数:
101
1、JdbcTemplate介绍 为了使 JDBC 更加易于使用,Spring 在 JDBCAPI 上定义了一个抽象层, 以此建立一个JDBC存取框架,Spring Boot Spring Data-JPA。 作为 SpringJDBC 框架的核心, JDBC 模板的设计目的是为不同类型的JDBC操 ...
分类:
数据库 时间:
2019-11-02 15:40:41
阅读次数:
76
hive安装部署 hive是基于hadoop的一个数据仓库工具,可以将结构化的数据文件映射成一张数据库表,并提供简单的SQL查询功能,可以将SQL语句转换为Mapreduce任务进行运行 在data目录下创建hive1目录用于存放相关文件 下载hive和mysql connector 解压hive到 ...
分类:
其他好文 时间:
2019-10-29 21:38:08
阅读次数:
99
[TOC] 声明:本文同步发表于 MongoDB 中文社区,传送门: "http://www.mongoing.com/archives/26201" 一、背景 MongoDB 提供了非常强大的性能分析及监控的命令,诸如 mongostat、mongotop 可以让我们对数据库的运行态性能了如指掌。 ...
分类:
数据库 时间:
2019-10-20 18:25:15
阅读次数:
169
Hadoop简介 Hadoop由Apache基金会开发的分布式系统基础架构,是利用集群对大量数据进行分布式处理和存储的软件框架。用户可以轻松地在Hadoop集群上开发和运行处理海量数据的应用程序。Hadoop有高可靠,高扩展,高效性,高容错等优点。Hadoop 框架最核心的设计就是HDFS和MapR ...
分类:
其他好文 时间:
2019-09-25 12:47:34
阅读次数:
126
摘要:VMware虚拟机安装Win10,Win10用虚拟机安装教程 微软发布Win10预览版下载地址后,用WMware虚拟机安装Win10是很好的选择。如何用VMware虚拟机安装Win10,Win10怎么用虚拟机安装? 工具/材料 VMware虚拟机 Win10 VMware虚拟机安装Win10, ...
分类:
其他好文 时间:
2019-09-22 01:27:45
阅读次数:
120
Hadoop生态圈 摘要:一:基本构成:HDFS(Hadoop分布式文件系统);Mapreduce(分布式计算框架);HBASE(分布式列存数据库); Zookeeper(分布式协作服务);HIVE(数据仓库);Pig(ad-hoc脚本)等。 二:详细了解一下其特性: Hadoop是一个由Apach ...
分类:
其他好文 时间:
2019-09-21 23:05:58
阅读次数:
119
一、简介 Azkaban 主要通过界面上传配置文件来进行任务的调度。它有两个重要的概念: Job : 你需要执行的调度任务; Flow :一个获取多个 Job 及它们之间的依赖关系所组成的图表叫做 Flow。 目前 Azkaban 3.x 同时支持 Flow 1.0 和 Flow 2.0,本文主要讲 ...
分类:
其他好文 时间:
2019-09-01 10:20:31
阅读次数:
116