最近一段时间主要重心在Amazon电商数据分析上，这是一个偏数据分析和可视化的项目。具体来说就是先获取Amazon的商品数据，数据清洗和持久化存储后作为我们自己的数据源。分析模块和可视化模块基于数据进行一系列的操作。 显然，整个项目中最基本，也是最重要的就是前期数据的获取，本篇文章就是针对数据...
分类：
其他好文 时间：
2014-07-22 22:53:35
阅读次数：
293
当你想要在工作中分享文件, 并且希望其他人甚至一群人给你反馈, 然后交还给你作修改,并存下修正过的不同版本, 再进行反覆讨论修正,你会怎么做呢?
通常我们会用电子邮件来传送这些档案, 向他人征求反馈, 並将不同版本的文件存放在本地,但是这并不是最好的解决方案, 当文件越来越多要共享, 当越来越多人要进行协作, 电子邮件可能不是一个好的工具。
亚马逊AWS最近推出了一项全新的企业云存储和分享服务Amazon Zocalo (城市“中央广场”的意思)，以Zocalo 命名, 是想表达这个服务就像是一个中央的...
分类：
其他好文 时间：
2014-07-17 21:13:00
阅读次数：
351
很多程序员的项目常常半途而废。他们有那么多的好点子，但是很多都流于空想。几乎每一个软件开发者都有一个这样的文件夹，里面很多都是些还没完工的项目，而这些程序里有不少在它诞生初期真心是个超棒的点子。和这些人一样，我也有很多好主意，有的甚至就是现在有些企业在用的。比如正决定着在eBay上还是在Amazon...
分类：
其他好文 时间：
2014-07-16 23:00:27
阅读次数：
208
环境是Mac OSX。尝试了一下amazon的EC2服务，注册基本比较简单，需要一张信用卡。进入控制台后选择EC2，点击launch instance，选择free tier的Amazon linux，一路点下去。比较重要的是保存好key pair，之后连接主机需要。网上看是以.pem为后缀的，但我...
分类：
其他好文 时间：
2014-07-09 15:41:11
阅读次数：
212
SQS即Simple Queue Service, 是一个分布式的消息队列服务,使用它非常简单,消息队列服务可以用来buffer burst, 使整个服务异步处理,不要求组件始终可用.
开发人员最初使用 Amazon SQS 时只需用到五个 API：
CreateQueue、SendMessage、ReceiveMessage、ChangeMessageVisibility 和 DeleteM...
分类：
其他好文 时间：
2014-07-03 13:29:36
阅读次数：
163
Spark目前支持多种分布式部署方式：一、Standalone Deploy Mode；二Amazon EC2、；三、Apache Mesos；四、Hadoop YARN。第一种方式是单独部署，不需要有依赖的资源管理器，其它三种都需要将spark部署到对应的资源管理器上。 除了部署的多种方式之...
分类：
其他好文 时间：
2014-07-02 13:48:43
阅读次数：
299
关于Amazon S3的数据一致性模型有两种：
撒旦发
有以下几种行为：
1 写一个新的object，然后开始读它，直到所有的变化都传播完（副本），你才能读到它，否则就是key does not exist。
2 写一个新的object，然后listkeys，直到所有的变化都传播完，你才能看到它。
3 覆盖一个已有的object，然后开始读它，直到所有的变化都传播完，你才能拿到最新的ob...
分类：
其他好文 时间：
2014-07-01 08:56:53
阅读次数：
291
Amazon EBS(Elastic Block Store，简称EBS) 为 Amazon EC2 实例提供块级存储服务。EBS 卷需要通过网络访问，并且能独立于实例的生命周期而存在，也就是说假如EC2实例出现问题，那么存放在EBS卷上的数据还是可以得到保存。Amazon EBS 提供高可用性、高可靠性的存储卷，并可以与一个正在运行 EC2 实例相连接且在实例中显示的为一个设备。对于那些需要建立...
分类：
其他好文 时间：
2014-06-24 20:03:43
阅读次数：
385
在上周Amazon也耐不住加入了手机竞争行列之中，发布了自己的Fire Phone，于是Android家族又多了一位变种成员，Android系统的碎片化程度也进一步加剧。因为工作的关系，我有幸在上个月就得到了一部工程机为其做提前开发，不过因为政策原因所以到现在才能来谈谈对这部新手机的看法。对于Fir...
分类：
移动开发 时间：
2014-06-24 11:24:50
阅读次数：
223
原博客地址：http://blog.csdn.net/gaoxingnengjisuan NOVA是OpenStack系统的核心模块，主要负责虚拟机实例的生命周期管理、网络管理（前几个版本）、存储卷管理（前几个版本）、用户管理以及其他相关云平台管理功能，在能力上类似于Amazon EC2和Racks...
分类：
其他好文 时间：
2014-06-21 18:17:32
阅读次数：
365
