Spark2.4新特性概述导读:Spark官方于今年11月份新发布了Spark2.4。那么新版本的Spark都有哪些值得了解的新特性?应对大数据领域的诸多方案,Spark目前是什么样的状况?未来会有怎样的规划?来自ApacheSparkPMC的大牛为我们讲述Spark的进击与挑战。11月23~24日,GIAC全球互联网架构大会将于上海举行。GIAC是高可用架构技术社区推出的面向架构师、技术负责人及
分类:
其他好文 时间:
2020-11-06 00:53:40
阅读次数:
19
格灵深瞳CTO邓亚峰:AI学习的三种路线导读:人工智能多年来一直是行业热门,AI人才也受各大公司争相聘请。如何能快速掌握AI技能?高水准的AI人才应该具备哪些专业能力?AI大牛是怎么炼成的?格灵深瞳CTO邓亚峰总结的AI学习路线,十分值得一读。11月23~24日,GIAC全球互联网架构大会将于上海举行。GIAC是高可用架构技术社区推出的面向架构师、技术负责人及高端技术从业人员的技术架构大会。今年的
分类:
其他好文 时间:
2020-11-06 00:53:16
阅读次数:
13
APM时代的质量保障之路:腾讯互娱品质管理部性能负责人访谈导读:11月23~24日,GIAC全球互联网架构大会将于上海举行。GIAC是高可用架构技术社区推出的面向架构师、技术负责人及高端技术从业人员的技术架构大会。今年的GIAC已经有微软,腾讯、阿里巴巴、蚂蚁金服,华为,科大讯飞、新浪微博、京东、七牛、美团点评、饿了么,才云,格灵深瞳,Databricks,等公司专家出席。本周购买可享门票88折优
分类:
其他好文 时间:
2020-11-06 00:53:01
阅读次数:
16
使用ceph-deploy部署预示着一个局限性,即只能在一主机上安装一个监视器。 不建议把监视器和 OSD 置于同一主机上。 考虑到高可用性,生产集群应该至少有 3 个监视器。 大多数监视器的比例必须像:1个在运行、3之2在运行、4之3在运行、5之3在运行、6之4在运行等等。 确保你增加的监视器能在 ...
分类:
其他好文 时间:
2020-11-04 18:48:54
阅读次数:
22
SlimTrie:战胜Btree单机百亿文件的极致索引-实现篇最近,知名博主@drdrxp(张炎泼)一条关于SlimTrie介绍的微博引发了热议高可用架构联系了XP老师,通过本文首次介绍了SlimTrie的详细实现。本文作者李文博,吴义谱、张炎泼对本文亦有贡献。李文博,目前就职于白山云科技有限公司,从事云存储研发工程师。在白山主要有s2分布式对象存储系统的日常建设和ec冷数据存储集群开发的实战经历
分类:
其他好文 时间:
2020-11-04 18:40:14
阅读次数:
16
1. COOKIE 使用和优缺点 1.1 cookie 原理:用户名+密码 cookie是保存再用户浏览器端,用户名和密码等明文信息 1.2 session 使用原理 session是存储再服务器端的一段字符串,相当于字典的key 1.用户向服务器发送用户名和密码。 2.验证服务器后,相关数据(如用 ...
分类:
其他好文 时间:
2020-11-04 18:21:46
阅读次数:
11
你所不知道的ChaosBlade那些事作者简介:肖长军,阿里巴巴技术专家,花名穹谷,多年应用性能监控研发和分布式系统高可用架构经验,现专注于混沌工程领域,具备多年混沌工程研发和实践经验。开源项目ChaosBlade的负责人,阿里云应用高可用服务(AHAS)产品研发,混沌工程布道师。项目背景阿里巴巴内部从最早引入混沌工程解决微服务的依赖问题,到业务服务、云服务稳态验证,进一步升级到公共云、专有云的业
分类:
其他好文 时间:
2020-11-04 18:16:57
阅读次数:
15
Netwarps一直在做去中心化的存储和计算平台,目标是物联网,甚至NDN网络。因此我们需要构建一个简洁的高性能的底层网络。之前Netwarps使用C语言实现了一套基本的P2P网络,然后在这个网络上搭建了去中心化文件存储系统(DFS)和去中心化计算平台(DCP)。但是随着技术的发展,我们越来越觉得基于C语言构建的P2P底层网络存在很多问题:1、C语言实现的异步框架维护困难,代码逻辑复杂;2、C语言
分类:
其他好文 时间:
2020-11-04 18:12:51
阅读次数:
15
场景介绍本文介绍如何在半小时内,通过阿里云容器ACK服务和文件存储NAS服务搭建一个简单的弹性、高可用NGINX网站。在完成本文的所有操作后,您将获得一个单网页的网站,用户的请求将会被打散到多个容器节点上,并且根据业务负载自动扩缩容,即使某个容器节点宕机也不会影响用户访问。另外您还可以将本地编辑的网页快速更新到网站上。背景知识本教程使用到的云产品如下:云服务器ECS云服务器(ElasticComp
分类:
Web程序 时间:
2020-11-04 17:59:46
阅读次数:
27
原理: 基于一主两从架构实现哨兵 哨兵的前提是已经实现了一个redis的主从复制的运行环境,从而实现一个一主两从基于哨兵的高可用redis架构注意: master 的配置文件中masterauth 和slave 都必须相同 所有节点安装redis: tar xf redis-5.0.7.tar.gz ...
分类:
其他好文 时间:
2020-11-04 17:38:55
阅读次数:
23