码迷,mamicode.com
首页 >  
搜索关键字:spark 大数据 hadoop docker    ( 46925个结果
Docker 数据卷容器(实现两个或多个容器间数据同步)
一、多个mysql数据同步 制作一个简单的Dockerfile FROM centos VOLUME ["volume1","volume2"] CMD /bin/bash 构建镜像: [root@yang docker]# docker build -t docker-volume .Sendin ...
分类:其他好文   时间:2021-01-28 12:03:20    阅读次数:0
解决spark-submit的There is insufficient memory for the Java Runtime Environment to continue.(老顽固问题) failed; error='Cannot allocate memory' (errno=12)
Q:第一次提交wordcount案例,OK,一切正常。再次提交,出现下述错误。完整错误粘贴如下: 21/01/27 14:55:48 INFO spark.SecurityManager: Changing modify acls groups to: 21/01/27 14:55:48 INFO ...
分类:编程语言   时间:2021-01-28 11:56:52    阅读次数:0
spark 从数据库中读取数据
spark 从数据库中读取数据的几种方式,以Mysql 为例 创建spark val spark = SparkSession.builer().appName("用户标签").master("local[*]").getOrCreate() val url = "jdbc:mysql://数据库地 ...
分类:数据库   时间:2021-01-27 13:56:39    阅读次数:0
【记录】springboot连接hive出错User: xxx is not allowed to impersonate anonymous
环境是hive和Hadoop 报错如:User: liwei is not allowed to impersonate anonymous 修改hadoop 配置文件 $HADOOP_HOME/etc/hadoop/core-site.xml <property> <name>hadoop.pro ...
分类:编程语言   时间:2021-01-27 13:53:02    阅读次数:0
containers的发展历程
本来想直接写docker知识点的,但是感觉只有了解containers的发展历程,才能知道技术知识点的来龙去脉,建立起一个线性的链条,把知识点串联起来。 1979: Unix V7 在1979年开发Unix V7期间,引入了chroot系统调用功能。这个功能将进程及其子进程的根目录更改为文件系统中的 ...
分类:其他好文   时间:2021-01-27 13:44:51    阅读次数:0
配置drone+docker+gogs+nodejs项目自动发布
最近学习了一下自动化部署相关的技术,记录一下自己的学习历程。 去年的时候腾讯云服务器搞活动,于是购买了一台云服务器用于学习。自己毕业后在第一家公司工作时,一直感觉项目上线是一件很头疼的事情,当时是采用pm2+nodejs的方式,项目上线就是登录到服务器上,手动替换js文件,然后用pm2重启进程。由于 ...
分类:Web程序   时间:2021-01-27 13:42:49    阅读次数:0
多台服务器Docker-compose 安装zookeeper集群
多台服务器Docker-compose 安装zookeeper集群 安装docker-compose zookeeper安装与配置 检查集群 安装docker-compose ? 安装docker:sudo apt-get install docker.io ? 开机启动docker sudo sy ...
分类:其他好文   时间:2021-01-27 13:35:09    阅读次数:0
kubeadm部署k8s集群
1 容器编排工具介绍 容器编排三套解决方案 kubernetes mesos+marathon machine+swarn+compose 1.1 Docker提供的容器编排方案 docker compose 单主机编排,只能面向一个docker主机进行编排 docker swarm 编排多主机do ...
分类:其他好文   时间:2021-01-27 13:24:27    阅读次数:0
《docker》
docker pull 获取一个新的镜像docker images 来列出本地主机上的镜像docker run -itd --name ubuntu-test ubuntu 运行容器,并且可以通过 exec 命令进入 ubuntu 容器 docker ps 命令查看容器的运行信息: docker b ...
分类:其他好文   时间:2021-01-27 13:12:20    阅读次数:0
Docker更换国内镜像源
1、修改/etc/docker/daemon.json配置文件 sudo /etc/docker/daemon.json 2、修改daemon.json文件的内容 { "registry-mirrors": ["https://docker.mirrors.ustc.edu.cn"] } syste ...
分类:其他好文   时间:2021-01-27 13:12:05    阅读次数:0
46925条   上一页 1 ... 67 68 69 70 71 ... 4693 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!