当数据用来作为定期连续测量时,它被称为时间序列信息。通过AWS的独特定位解决了基于时间序列的信息处理带来了规模化挑战。 这种弹性是通过AutoScaling组进行采集处理,Amazon Elastic MapReduce定时作业的AWS数据管道,系统间数据编排的AWS数据管道,大规模数据分析的AmazonRedshift来实现的。关键架构要素包括用于消息缓冲的SQS,它减少了频繁AWS数据管道调度...
分类:
其他好文 时间:
2015-02-05 20:28:02
阅读次数:
179
鉴于Web服务上的资源可以通过它们的URL就能识别,采用无状态的客户端 - 服务器架构,开发团队就可以为部门间,为企业,或者直接用于消费者自由地创建应用完成文件共享和同步。下图描述了利用AWS实现的可扩展性和成本效益的文件共享和同步平台的核心架构。1. 文件同步服务端点是Elastic Load Balancer, 将呼入请求分发到一组基于AmazonElastic Compute Cloud ...
分类:
其他好文 时间:
2015-02-05 18:28:49
阅读次数:
185
灾难恢复是从对IT系统造成负面影响的任何事件中恢复过来的相关技术防范和措施。。一个典型的方法是构建重复的基础设施,以确保在灾难发生时备用能力的可用性。AWS可以扩展公司私有基础架构上所需要的基础设施。对于灾难恢复解决方案,这将导致在显著的成本节约。下图显示了一个灾难恢复设置为本地应用程序的一个例子。1. 公司的数据中心托管着包括数据库服务器的应用以及包含内容管理系统本地存储的应用服务器。 2. ...
分类:
其他好文 时间:
2015-02-05 13:35:50
阅读次数:
273
互联网广告服务需要在有限时间内完成定向广告,这是需要面对的技术挑战。AWS提供了在云端构建可靠的,容错的,高可用系统的基础设施和服务。在本文中,将描述系统中的两个主要部分:广告服务的基础结构和用于点击数据收集的数据分析集群。1. 当用户加载一个web页面时,广告服务器返回一个广告资源被展示的标识。广告服务器运行在 EC2 实例上,根据用户的个人资料,从存储在Amazon DynamoDB 表中查...
分类:
其他好文 时间:
2015-02-05 09:34:51
阅读次数:
134
AWS对于大规模计算方案是很受欢迎的,如科学计算,模拟和研究项目。这些方案包括从科研设备,测量设备,或其他计算作业的大量数据集的采集。采集后,使用大规模计算作业的分析来生成最终数据集。通常,这些结果将提供给更多的受众。1. 为了将大数据集上传到AWS,关键是拥有最多的可用带宽。 通过多客户端的并行处理,就可以把数据上传到S3, 每个客户端采用多线程技术实现并行上传或上传多部分以便进一步并行处理。...
分类:
其他好文 时间:
2015-02-04 20:24:23
阅读次数:
143
分享一个AIX进程监控脚本:当MWM进程数大于2时,调用sendmail发送邮件通知用户,脚本如下#!/usr/bin/ksh
#---------------------------------------------------------------#
#ScriptName:MWMCheckShell
#Createdby:Xin23
#on:2015.02.04
#-------------------------------------..
分类:
系统相关 时间:
2015-02-04 18:57:08
阅读次数:
221
AWS提供了在云端构建可靠的,容错的,高可用系统的基础设施和服务。需要开发者的特殊关注,这些特性已经设计在AWS服务中了,但需要明确和准确的使用。 Amazon EC2 提供了构建目标基础设施的模块,它们本身不是容错的,硬盘、电源、甚至机架都可能挂掉,本文中组合特性的使用能够实现容错性和高可用性。1. 负载均衡是增加系统可用性的有效方法。如果负载均衡器后的实例失效,可以被无缝地替换掉,而不影响其...
分类:
其他好文 时间:
2015-02-03 15:13:01
阅读次数:
171
在AWS执行批处理任务时,允许按需配置多部分作业处理的应用架构,可用于对异构的系统的瞬时或延迟部署,并可扩展为“网格”型工作节点,通过并联的大批量任务处理实现快速收敛。面向批处理应用程序现在可以有很多的地方利用这种风格按需加工,包括理赔处理,大规模改造,媒体转码和多部分的数据处理工作。 批处理架构通常是高可变使用模式的代名词,即在一段低使用率后有明显的使用峰值(例如,月末的处理)。构建一个批处理架...
分类:
其他好文 时间:
2015-02-03 11:15:41
阅读次数:
178
提供数字内容服务最基本也是最简单任务那就是在低于预算的前提下,实现低延迟,高可用性,耐用性,访问控制,以及数百万的并发浏览。此外,因为“尖峰”模式的,运营团队经常需要提供静态的硬件,网络,和管理资源,以支持预期的最大需要,但是在高峰时段以外则常常造成浪费。 AWS提供了一整套服务,专门为媒体服务提供了高性能。每个服务功能,都是在弹性的基础设施上按需付费,这意味着可以根据需求曲线放大和缩小服务规模,...
分类:
其他好文 时间:
2015-02-02 18:16:17
阅读次数:
121
heartbeat架好后,我们就需要监控起来喽,下面我们就来了解下怎么监控。
首先来了解下几个命令,这几个命令在heartbeat安装后会自动加上,我们的监控脚本就用到这几个命令。
[root@usvr-210 libexec]# which cl_status
/usr/bin/cl_status
[root@usvr-210 libexec]# cl_status listnodes...
分类:
移动开发 时间:
2015-02-01 21:55:15
阅读次数:
286