码迷,mamicode.com
首页 >  
搜索关键字:mongodb mapreduce    ( 14211个结果
docker 安装mongoDB 版本是mongo:4.2.8
1.下载安装 docker pull mongo:4.2.8 2.运行一个容器 mkdir -p /storage/data/mongodb/db #创建文件夹 docker run -itd --name mongo --restart=always -p 27017:27017 -e MONGO ...
分类:数据库   时间:2021-03-10 13:07:53    阅读次数:0
ForkJoinPool线程池
介绍 分而治之是一个有效的处理大数据的方法,著名的MapReduce就是采用这种分而治之的思路。简单的说,如果要处理1000个数据,但是我们不具备处理1000个数据的能力,只可以处理10个数据。我们可以将这个任务分成100份,每份处理10个,并将最后的结果进行合成,形成1000个数据的处理结果。 把 ...
分类:编程语言   时间:2021-03-10 13:02:18    阅读次数:0
MongoDB-备份恢复
备份工具 (1)** mongoexport/mongoimport (2)***** mongodump/mongorestore 备份工具区别在那里? 应用场景总结: mongoexport/mongoimport:json csv 1.异构平台迁移 mysql < > mongodb 2.同平 ...
分类:数据库   时间:2021-03-09 13:01:37    阅读次数:0
SpringBoot集成Redis
SpringBoot整合Redis SpringBoot 操作数据 :spring-data jpa jdbc mongodb redis! SpringData 也是和SpringBoot 齐名的一个项目 说明:在 SpringBoot2.X之后,之前使用的jedis被替换为了lettuce je ...
分类:编程语言   时间:2021-03-06 14:53:16    阅读次数:0
hadoop 配置历史服务器
配置文件 mapred-site.xml 加入以下代码 <!-- 历史服务器端地址 --> <property> <name>mapreduce.jobhistory.address</name> <value>hadoop102:10020</value> </property> <!-- 历史服 ...
分类:其他好文   时间:2021-03-06 14:37:58    阅读次数:0
大数据概论
大数据概述 一.用图表描述Hadoop生态系统的各个组件及其关系。 Hadoop生态系统除了核心的HDFS和MapReduce以外,Hadoop生态系统还包括Zookeeper、HBase、Hive、Pig、Mahout、Sqoop、Flume、Ambari等功能组件。 (1).HDFS:具有处理超 ...
分类:其他好文   时间:2021-03-03 12:14:24    阅读次数:0
大数据概论
1.用图表描述Hadoop生态系统的各个组件及其关系。 Hadoop生态系统除了核心的HDFS和MapReduce以外,Hadoop生态系统还包括Zookeeper、HBase、Hive、Pig、Mahout、Sqoop、Flume、Ambari等功能组件。 (1).HDFS:具有处理超大数据、流式 ...
分类:其他好文   时间:2021-03-02 12:28:59    阅读次数:0
大数据概述
1.用图表描述Hadoop生态系统的各个组件及其关系。 2.阐述Hadoop生态系统中,HDFS, MapReduce, Yarn, Hbase及Spark的相互关系。 HDFS(Hadoop分布式文件系统)是Hadoop体系中 数据存储管理的基础。它是一个高度容错的系统,能检测和应对硬件故障,用于 ...
分类:其他好文   时间:2021-03-02 12:24:42    阅读次数:0
大数据概述
1.用图表描述Hadoop生态系统的各个组件及其关系。 2.阐述Hadoop生态系统中,HDFS, MapReduce, Yarn, Hbase及Spark的相互关系。 Hadoop对应于Google三驾马车:HDFS对应于GFS,即分布式文件系统,MapReduce即并行计算框架,HBase对应于 ...
分类:其他好文   时间:2021-03-02 12:20:23    阅读次数:0
01 大数据概述
1.用图表描述Hadoop生态系统的各个组件及其关系。 2.阐述Hadoop生态系统中,HDFS, MapReduce, Yarn, Hbase及Spark的相互关系。 Hadoop对应于Google三驾马车:HDFS对应于GFS,即分布式文件系统,MapReduce即并行计算框架,HBase对应于 ...
分类:其他好文   时间:2021-03-02 12:10:47    阅读次数:0
14211条   上一页 1 ... 7 8 9 10 11 ... 1422 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!