转自:http://hi.baidu.com/lubezhang/blog/item/bd308b3b7ecce3ec14cecb4f.html IBM MQ(IBM Message Queue)是IBM的一款商业消息中间产品,适用于分布式计算环境或异构系统之中。消息队列技术是分布式应用间交换信息的 ...
分类:
其他好文 时间:
2017-09-16 14:45:26
阅读次数:
188
阿里巴巴集团技术委员会主席,阿里云创始人,云栖小镇及雪浪小镇创立者、“名誉镇长”,人称“博士”。 2008年9月,加入阿里巴巴集团担任首席架构师一职,负责集团技术架构以及基础技术平台建设。 2009年9月,创建阿里云计算公司并任总裁,领导团队自主研发了大规模分布式计算系统——“飞天”,建立了互联网规 ...
分类:
其他好文 时间:
2017-09-14 16:34:50
阅读次数:
164
一、定义 分布式事务是指事务的参与者、支持事务的服务器、资源服务器以及事务管理者分别位于分布式系统的不同节点之上。通常一个分布式事务中会涉及对多个数据源或业务系统的操作。 二、CAP和BASE理论 1、CAP定理,分布式计算领域的公认定理,CAP定理告诉我们: 一个分布式系统不可能同时满足一致性(C ...
分类:
其他好文 时间:
2017-09-10 01:07:45
阅读次数:
137
爬虫推荐的工具:pyspider,BeautifulSouprequestsscrapymongodbrediskafka.repyV8:python执行js的插件phatomjs:一个无界面的,可脚本编程的WebKit浏览器引擎。它原生支持多种web 标准:DOM 操作,CSS选择器,JSON,C ...
分类:
其他好文 时间:
2017-09-08 16:26:09
阅读次数:
227
UUID简介如下:1.简介UUID含义是通用唯一识别码 (Universally Unique Identifier),这 是一个软件建构的标准,也是被开源软件基金会 (Open Software Foundation, OSF) 的组织应用在分布式计算环境 (Distributed Computi ...
分类:
Web程序 时间:
2017-09-02 20:42:20
阅读次数:
250
科普Spark,Spark是什么,如何使用Spark 1.Spark基于什么算法的分布式计算(很简单) 2.Spark与MapReduce不同在什么地方 3.Spark为什么比Hadoop灵活 4.Spark局限是什么 5.什么情况下适合使用Spark 什么是Spark Spark是UC Berke ...
分类:
其他好文 时间:
2017-09-01 14:36:09
阅读次数:
180
J2EE 框架Spring 开发框架 + SSH or SSM Lucene 索引和查询IKAnalyzer 分词Webmagic 爬虫 ETL工具:KettleSqoop 结构化数据库-hadoop数据萃取。可以将一个关系型数据库(MySQL ,Oracle等)中的数据导进到Hadoop的HDFS ...
分类:
其他好文 时间:
2017-08-30 17:14:00
阅读次数:
187
来源:鸟窝,colobu.com/2015/11/17/Jax-RS-Performance-Comparison/如有好文章投稿,请点击 → 这里了解详情在微服务流行的今天,我们会从纵向和横向分解代码的逻辑,将一些独立的无状态的代码单元实现为微服务,可以将它们发布到一些分布式计算单元或者Docke... ...
分类:
编程语言 时间:
2017-08-30 14:15:22
阅读次数:
159
原文出自 http://blog.fens.me/Hadoop-family-roadmap/ Hadoop家族学习路线图 Hadoop家族系列文章,主要介绍hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, Hbase, Sqoop, Mahout, Zookeeper, A ...
分类:
其他好文 时间:
2017-08-25 15:04:37
阅读次数:
143
1、storm介绍 storm是一种用于事件流处理的分布式计算框架,它是有BackType公司开发的一个项目,于2014年9月加入了Apahche孵化器计划并成为其旗下的顶级项目之一。Storm可以方便地在一个计算机集群中编写与扩展复杂的实时计算,Storm用于实时处理,就好比 Hadoop 用于批 ...
分类:
其他好文 时间:
2017-08-24 01:10:25
阅读次数:
175