码迷,mamicode.com
首页 >  
搜索关键字:hadoop mapreduce job eclipse    ( 44113个结果
更加高效的遍历 Map
https://stackoverflow.com/questions/46898/how-do-i-efficiently-iterate-over-each-entry-in-a-java-map 首先一起来看看,有哪些遍历 Map 的方式 1. 利用 iterator 和 Map.Entry ...
分类:其他好文   时间:2021-04-30 12:08:14    阅读次数:0
Hadoop目录
01.安装VMware,加载centos镜像软件。配置主机、VMware、Windows的IP地址。 02.hadoop中目录介绍:bin目录 hdfs 、mapred、 yarn 命令 etc目录包含hdfs 、mapred、 yarn 相关的配置文件 sbin 目录与集群相关的命令 share目 ...
分类:其他好文   时间:2021-04-29 11:57:44    阅读次数:0
Job for dhcpd.service failed because the control process exited with error code. See "systemctl status dhcpd.service" and "journalctl -xe" for details.问题
我总结了下启动dhcp服务报这个错误原因,大概有三种情况: 1、默认配置文件默认为空 2、配置文件配置错误导致 3、与网卡设置有关,不能自动获取到地址,导致dhcp服务不能启动。 上面两种错误一般很少出现,只要正确配置就能成功,但第三种配置正确后也不一定会成功,今天我就遇到了这个问题,后面发现是网卡 ...
分类:其他好文   时间:2021-04-29 11:55:36    阅读次数:0
Hadoop组件
#Hadoop 分布式计算平台,同时也是一个生态圈 hadoop 1.X HDFS+MapReducer+Common hadoop 2.X HDFS+MAP+Reducer+Common hadoop 3.X java7->java8,引入纠删码,重写shell脚本,支持超过两个NameNode, ...
分类:其他好文   时间:2021-04-27 15:04:12    阅读次数:0
使用Tensorflow Object Detection进行训练和推理
整体流程(以PASCAL VOC为例) 1.下载PASCAL VOC2012数据集,并将数据集转为tfrecord格式 2.选择并下载预训练模型 3.配置训练文件configuration(所有的训练参数都通过配置文件来配置) 4.训练模型 5.利用tensorboard查看训练过程中loss,ac ...
分类:其他好文   时间:2021-04-27 14:57:01    阅读次数:0
HDFS的hadoop和hdfs命令详解
原文链接:https://www.cnblogs.com/zsql/ 本篇主要对hadoop命令和hdfs命令进行阐述,yarn命令会在之后的文章中体现 hadoop fs命令可以用于其他文件系统,不止是hdfs文件系统内,也就是说该命令的使用范围更广可以用于HDFS、Local FS等不同的文件系 ...
分类:其他好文   时间:2021-04-26 13:47:48    阅读次数:0
HBase客户端开发的Java API
HBase客户端开发API 建立连接 import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.hadoop.hbase.client.*; import org. ...
分类:编程语言   时间:2021-04-26 13:29:32    阅读次数:0
基于Hadoop的sqoop组件的部署
基于Hadoop的sqoop组件的部署 什么是 Sqoop Sqoop 是一款开源的工具,主要用于在 Hadoop(Hive)与传统的数据库(mysql、postgresql...) 间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres 等)中的 数据导 ...
分类:其他好文   时间:2021-04-26 13:03:24    阅读次数:0
KAFKA测试
kafka功能简单测试 启动zookeeper 启动zk命令: ./zhServer.sh start 启动akfka(注意server.properties的配置) 启动akfka命令:./kafka-server-start.sh /home/hadoop/app/kafka_2.11-0.9. ...
分类:其他好文   时间:2021-04-24 13:16:11    阅读次数:0
C# 对接sftp(项目中用到)
在项目中用到的是获取文件列表和下载文件,这个是可以的,其他应该也没问题 在对接sftp时必须引用的三个dll文件,可以从newGet包管理里面下载 DiffieHellman Org.Mentalis.Security Tamir.SharpSSH 我们是做了一个exe用sqlserver的job进 ...
分类:Windows程序   时间:2021-04-21 12:55:27    阅读次数:0
44113条   上一页 1 ... 10 11 12 13 14 ... 4412 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!