码迷,mamicode.com
首页 >  
搜索关键字:spark worker 集群部署 案例    ( 29608个结果
spark安装配置
准备:1. 规划3个集群节点:hosts主机都已经配置好映射,映射主机名分别为master,slave1,slave2,且已经进行ssh免密配置,确保端口互通,防火墙关闭 2. 先安装好scala(参考:https://www.cnblogs.com/sea520/p/13518158.html) ...
分类:其他好文   时间:2021-06-19 19:11:31    阅读次数:0
java--IO--ObjectInputStream和ObjectOutputStream
对象处理流:ObjectInputStream和ObjectOutputStream OjectInputStream和ObjectOuputStream使用案例 序列化: package com.model.io.outputstream.objectoutputstream; import co ...
分类:编程语言   时间:2021-06-19 19:06:05    阅读次数:0
性能测试流程
性能测试流程 注意要点 测试机器硬件配置尽量和线上一致 系统版本与线上一致 测试环境部署线上最小单元模块(一般线上都是集群部署,线下可以用最小的单元集群) 应用、中间件、数据库要与线上一致 其他特殊配置 数据构造 ? 业务接口 ? -- 适合数据表关系复杂 ? -- 优点: 数据完整性比较好 ? 存 ...
分类:其他好文   时间:2021-06-18 19:57:35    阅读次数:0
动手数据分析-泰坦尼克案例(数据清洗及特征处理)
2.1 缺失值观察与处理 (1)请查看每个特征缺失值个数 df[df.Age.isna()] (2)缺失值处理方法 填充方法: 思考: ...
分类:其他好文   时间:2021-06-18 19:22:41    阅读次数:0
kubernetes集群系列资料01---集群规划
本资料以VMware虚拟机为节点进行创建kubernetes集群。 1.K8S集群部署节点规划 K8S-master01:K8S集群控制节点; K8S-node01、K8S-node02:运行POD的工作节点; harbor:创建本地镜像私有仓库; router:软路由koolshare,为K8S集 ...
分类:Web程序   时间:2021-06-18 19:15:03    阅读次数:0
Shell编程之备份数据库
备份数据库 我们的数据在时刻更新着,当数据量到达一定程度时就需要进行备份,方便我们进行管理 本篇介绍怎么在指定时间备份数据库并打包,同时在满足某一个条件时就删除已经备份过的数据库文件 shell编程综合案例 需求分析 每天凌晨2:30备份数据库 数据库名到 /data/backup/db 备份开始和 ...
分类:数据库   时间:2021-06-18 18:58:34    阅读次数:0
jdbc操作mysql(二)
案例四:封装共有操作 封装一个数据库的会话的类 点击查看详细代码 import java.sql.*; public class ConnectionUtil { /** * 获取连接对象的方法,返回一个Connection * 方法体中是共有操作:加载驱动,建立连接 */ public stati ...
分类:数据库   时间:2021-06-17 17:10:30    阅读次数:0
Spark初始换HiveContext空指针异常
spark程序初始化HiveContext报错:空指针异常 版本说明: spark: 1.6.1 scala: 2.10.8 hive: 1.2.1 报错信息 java.lang.RuntimeException: java.lang.NullPointerException at org.apac ...
分类:其他好文   时间:2021-06-17 16:37:17    阅读次数:0
JavaWeb-简单的登录案例
简单的登录案例 步骤: 1.编写实体类 public class User { private String username; private String password; public void setUsername(String username) { this.username = u ...
分类:编程语言   时间:2021-06-16 17:59:27    阅读次数:0
马哥教育-第十三周
1、解决DOS攻击生产案例:根据web日志或者或者网络连接数,监控当某个IP 并发连接数或者短时内PV达到100,即调用防火墙命令封掉对应的IP,监控频 率每隔5分钟。防火墙命令为:iptables -A INPUT -s IP -j REJECT 根据并发链接数 编写脚本: root@gitlab ...
分类:其他好文   时间:2021-06-16 17:47:42    阅读次数:0
29608条   上一页 1 ... 5 6 7 8 9 ... 2961 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!