概述 架构愿景 架构目标 质量要求 架构原则 架构组成 架构关键点 业务架构 设计原则 业务架构图 现有项目 存在的问题 系统风险 应用架构 设计原则 常规做法 应用架构图 数据架构 设计原则 数据架构图 技术架构 设计原则 架构检验总结 监控 熔断测试 压测 演练 故障预测&风险评估 总结 架构目 ...
分类:
其他好文 时间:
2016-04-25 22:27:07
阅读次数:
1256
培训大数据架构开发、挖掘分析! 从零基础到高级,一对一培训![技术QQ:2937765541] 课程体系: 获取视频资料和培训解答技术支持地址 课程展示(大数据技术很广,一直在线为你培训解答!): 获取视频资料和培训解答技术支持地址 ...
分类:
数据库 时间:
2016-04-20 17:53:40
阅读次数:
321
本文是松子(李博源)的大数据平台发展史系列文章的第四篇(共四篇),本系列以独特的视角,比较了非互联网和互联网两个时代以及传统行业与非传统行业。是对数据平台发展的一个回忆,对非互联网、互联网,从数据平台的用户角度、数据架构演进、模型等进行了阐述。 在互联网时代被弱化的数据模型 谈起数据模型就不得不提传 ...
分类:
其他好文 时间:
2016-04-18 11:24:10
阅读次数:
297
最近在调研一款神器——IFTTT,发现这个应用用了不少高端的技术,比如说:Docker、微服务架构、Kafka、Amazon云服务、Elasticsearch、机器学习、数据挖掘等。下面开始介绍。
IFTTT简介
各种各样的互联网服务如社交、相册、云存储、笔记、邮箱等等都在不同程度上融入了人类的工作与日常生活,但是不同的服务之间往往互不相干,以至于我们的信息都被碎片化放在了不同的地方。正是IF...
分类:
其他好文 时间:
2016-04-12 11:13:59
阅读次数:
220
培训大数据架构开发! 从零基础到高级,一对一培训![技术QQ:2937765541] 课程体系: 获取视频资料和培训解答技术支持地址 课程展示(大数据技术很广,一直在线为你培训解答!): 获取视频资料和培训解答技术支持地址 ...
分类:
Web程序 时间:
2016-04-11 01:47:24
阅读次数:
155
培训大数据架构开发! 从零基础到高级,一对一培训![技术QQ:2937765541] 课程体系: 获取视频资料和培训解答技术支持地址 课程展示(大数据技术很广,一直在线为你培训解答!): 获取视频资料和培训解答技术支持地址 ...
分类:
Web程序 时间:
2016-04-11 01:32:22
阅读次数:
260
Part1软件架构“架构”是依据业务设计组件、模块、框架、类等不同粒度的单元将其组合的策略。没有理想上通用的架构,不同的软系统的着重点不同。(业务逻辑复杂、并发性能高、扩展性好)架构五视图概念:物理架构(安装、部署需求)、逻辑架构(业务需求)、数据架构(数据需求)、开发架构(代码扩展、重用需求)、运...
分类:
其他好文 时间:
2015-11-28 11:53:22
阅读次数:
165
Kafka 是一个高吞吐、分布式、基于发布订阅的消息系统,利用Kafka技术可在廉价PC Server上搭建起大规模消息系统。Kafka具有消息持久化、高吞吐、分布式、多客户端支持、实时等特性,适用于离线和在线的消息消费Kakfa特点:解耦:消息系统在处理过程中插入一个隐含、基于数据的接口层。冗余....
分类:
其他好文 时间:
2015-11-09 20:58:24
阅读次数:
440
1、 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。2、一个独立的Flume进程称之为Agent,包含组件Source、Channel、Sink SourceFl...
分类:
Web程序 时间:
2015-11-09 20:53:59
阅读次数:
278
Spark是UC Berkeley AMP 实验室基于map reduce算法实现的分布式计算框架,输出和结果保存在内存中,不需要频繁读写HDFS,数据处理效率更高Spark适用于近线或准实时、数据挖掘与机器学习应用场景Spark和HadoopSpark是一个针对超大数据集合的低延迟的集群分布式计算...
分类:
其他好文 时间:
2015-11-09 20:43:20
阅读次数:
520