Spark对数据的核心抽象——弹性分布式数据集（Resilient Distributed Dataset），简称RDD。RDD其实就是分布式的元素集合。在Spark中，对数据的所有操作不外乎创建RDD、转化已有RDD以及调用RDD操作进行求值。而在这背后，Spark会自动将RDD中的数据分发到集群 ...
分类：
其他好文 时间：
2020-05-30 22:18:13
阅读次数：
105
Kubernetes编排工具 K8S是一种以容器未中心的基础架构,提供集群内：容器部署、容器扩展、容器管理的开源平台 Kubernetes是一个以容器为中心的基础架构,可以实现在物理集群或虚拟机集群上调度和允许容器,提供容器自动部署、扩展和管理的开源平台。满足了应用程序在生产环境中的一些通用需求：应 ...
分类：
Web程序 时间：
2020-05-30 20:04:18
阅读次数：
70
一、复杂均衡概述 负载均衡也是Nginx常用的一个功能，负载均衡其意思就是分摊到多个操作单元上进行执行，例如Web服务器、FTP 服务器、企业关键应用服务器和其它关键任务服务器等，从而共同完成工作任务 简单而言就是当有2台或以上服务器时，根据规则随机的将请求分发到 指定的服务器上处理，负载均衡配置一 ...
分类：
其他好文 时间：
2020-05-30 10:34:23
阅读次数：
70
Spark SQL 1、Spark SQL 是 Spark 的一个模块，可以和 RDD 进行混合编程、支持标准的数据源、可以集成和替代 Hive、可以提供 JDBC、ODBC 服务器功能。 2、Spark SQL 的特点： （1）和 Spark Core 的无缝集成，可以在写整个 RDD 应用的时候 ...
分类：
其他好文 时间：
2020-05-29 19:38:34
阅读次数：
75
列出分发版 wsl -l , wsl --list wsl --list --all wsl --list --running 设置默认分发版 wsl -s Ubuntu 取消注册和重新安装分发版 注销后，与该分发关联的所有数据、设置和软件都将永久丢失。 从 Store 重新安装会安装分发版的干净副 ...
分类：
其他好文 时间：
2020-05-28 23:34:55
阅读次数：
152
1.数对和 2.平方数之和 3.颜色分类 4.仅仅反转字母 5.验证回文字符串II 6.最短无序连续子数组 7.分发饼干 1.LeetCode面试题 16.24.数对和 设计一个算法，找出数组中两数之和为指定值的所有整数对。一个数只能属于一个数对。 示例 1: 输入: nums = [5,6,5], ...
分类：
其他好文 时间：
2020-05-28 16:50:02
阅读次数：
52
1、关闭和停止NetworkManager服务（一定要关闭，不关会对做bonding有干扰）systemctlstopNetworkManager.service#停止NetworkManager服务systemctldisableNetworkManager.service#禁止开机启动NetworkManager服务2、加载bonding模块modprobe--first-timebondin
分类：
其他好文 时间：
2020-05-28 11:32:32
阅读次数：
87
实时数据订阅与分发系统可以将业务数据源变更实时分发分发到消息总线上，并维护消息的统一格式，提供通用的客户端框架供消息生产者与下游业务接入。 一般能用于以下场景： 索引构建：MySQL到ES 缓存管理：MySQL到Redis或本地cache 数据库镜像 实时备份 价格变化等重要业务信息订阅 实时数据订 ...
分类：
其他好文 时间：
2020-05-28 00:42:10
阅读次数：
182
今日内容概要 无名有名分组反向解析 路由分发 名称空间(了解) 伪静态(了解) 虚拟环境(了解) django1.X和django2.X的区别(了解) 视图层 三板斧 JsonResponse form表单上传文件 FBV(function based view)与CBV(class based v ...
分类：
其他好文 时间：
2020-05-27 20:39:08
阅读次数：
85
近日，阿里云杨敬宇在CSDN阿里云核心技术竞争力在线峰会上进行了《5G基础设施-阿里云边缘计算的技术演进之路》主题演讲，针对5G时代下，行业和技术的趋势、边缘计算产业通识以及阿里云边缘计算从过去到未来的技术演进之路进行分享。5G+AI需求推动边缘计算不断向前算力分布形态发生根本变化回顾历史，自从1994年接入互联网，已经有20多年的时间，从应用场景看，终端从PC时代走到了移动时代，也包括电视、摄像
分类：
其他好文 时间：
2020-05-26 20:15:08
阅读次数：
71
