码迷,mamicode.com
首页 >  
搜索关键字:hadoop 生态系统 概述    ( 44117个结果
【JVM】垃圾回收概述(十五)
一、关于垃圾收集 Java 和 C++语言的区别,就在于垃圾收集技术和内存动态分配上,C语言没有垃圾收集技术,需要我们手动的收集。 垃圾收集,不是Java语言的伴生产物。早在1960年,第一门开始使用内存动态分配和垃圾收集技术的Lisp语言诞生。 关于垃圾收集有三个经典问题: 哪些内存需要回收? 什 ...
分类:其他好文   时间:2021-04-08 13:01:02    阅读次数:0
Spring Data JPA
一、JPA概述及基本操作 1、ORM思想 ORM(Object-Relational Mapping) 表示对象关系映射。 目的:通过操作实体类就可以对数据库表进行操作 建立两个映射: 实体类和表的映射 实体类属性和表中字段的映射 实现ORM思想的框架:Hibernate、mybatis 2、JPA ...
分类:编程语言   时间:2021-04-08 12:59:01    阅读次数:0
zookeeper快速入门学习
zookeeper概述: zookeeper是一个开源的分布式协调服务,提供分布式数据一致性解决方案,分布式应用程序可以实现数据发布订阅、负载均衡、命名服务、集群管理分布式锁、分布式队列等功能。 zookeeper提供了分布式数据一致性解决方案,那什么是分布式数据一致性?首先我们谈谈什么叫一致性? ...
分类:其他好文   时间:2021-04-07 11:43:05    阅读次数:0
debian10下miniconda环境配置
概述 环境安装 设置是否自动启动 基本使用 创建环境 进入/退出环境 安装 python package 概述 使用 python 做数据分析,目前最方便和最流行的环境就是 Anaconda。 Anaconda 太重,刚开始学习使用 python 数据分析,还是觉得 Miniconda 更好一些。 ...
分类:其他好文   时间:2021-04-07 11:41:41    阅读次数:0
计算机与编程概述
概述 计算机包括硬件和软件两个部分。硬件包括计算机中可以看得到的物理部分,而软件提供看不见的指令部分。这些指令控制硬件并且使得硬件完成特定的任务。 程序设计 创建或者开发软件,软件包含了指令,告诉计算机做什么。 程序设计语言 软件开发人员在程序语言工具帮助下创建软件 如何学习那种程序设计语言? 没有 ...
分类:其他好文   时间:2021-04-07 10:30:43    阅读次数:0
PySpark第一篇.PySpark简介
1.Spark概述 Apache Spark是一个闪电般快速的实时处理框架。它进行内存计算以实时分析数据。由于 Apache Hadoop MapReduce 仅执行批处理并且缺乏实时处理功能,因此它开始出现。因此,引入了Apache Spark,因为它可以实时执行流处理,也可以处理批处理。 除了实 ...
分类:其他好文   时间:2021-04-06 15:01:09    阅读次数:0
Hadoop序列化
2.1 序列化概述 1)什么是序列化 序列化就是把内存中的对象,转换成字节序列(或其他数据传输协议)以便于存储到磁盘(持久化)和网络传输。 反序列化就是将收到字节序列(或其他数据传输协议)或者是磁盘的持久化数据,转换成内存中的对象。 2)为什么要序列化 一般来说,“活的”对象只生存在内存里,关机断电 ...
分类:其他好文   时间:2021-04-06 14:52:31    阅读次数:0
集合框架的一个小总结
集合框架简介 概述 集合就像一种容器,可以把多个对象放进容器内 特点:提供一种存储空间可变的存储模型,存储的数据容量可以随时发生改变 集合按照其存储结构可以分为两大类: 单列集合 java.util.Collection 双列集合 java.util.Map 四大体系 Set:无序、不可重复的集合 ...
分类:其他好文   时间:2021-04-06 14:42:03    阅读次数:0
MapReduce概述
1.1 MapReduce定义 MapReduce 是一个分布式运算程序的编程框架,是用户开发“基于 Hadoop 的数据分析 应用”的核心框架。 MapReduce 核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个 Hadoop 集群上。 1.2 Ma ...
分类:其他好文   时间:2021-04-05 12:32:51    阅读次数:0
实时流式计算 - Kafka Stream
实时流式计算 Kafka Stream 2.1 概述 Kafka Stream是Apache Kafka从0.10版本引入的一个新Feature。它是提供了对存储于Kafka内的数据进行流式处理和分析的功能。 Kafka Stream的特点如下: Kafka Stream提供了一个非常简单而轻量的L ...
分类:其他好文   时间:2021-04-05 12:27:09    阅读次数:0
44117条   上一页 1 ... 29 30 31 32 33 ... 4412 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!