最近一段时间主要重心在Amazon电商数据分析上，这是一个偏数据分析和可视化的项目。具体来说就是先获取Amazon的商品数据，数据清洗和持久化存储后作为我们自己的数据源。分析模块和可视化模块基于数据进行一系列的操作。 显然，整个项目中最基本，也是最重要的就是前期数据的获取，本篇文章就是针对数据...
分类：
其他好文 时间：
2014-07-22 22:53:35
阅读次数：
293
还有这个：http://www.nedworks.org/~mark/presentations/san/Wikimedia%20architecture.pdfAmazon的体系结构Amazon从一个很小的网上书店发展成为现今世界上最大的网上书店中。他们开辟了让顾客来评估，审查和推荐商品的新方式。...
分类：
其他好文 时间：
2014-07-19 23:25:33
阅读次数：
371
我们其实一共碰到2个问题，1. 一个是弹出了货品编辑画面，但是货品的明细没有2.有货品明细但是货品明细各个字段都是空的，上面2种情况数据库都是有值的。第一个问题解决方案：修改html中的JSapp/b2c/view/admin/goods/detail/spec/set_spec.html这个文件修...
分类：
其他好文 时间：
2014-07-18 17:33:09
阅读次数：
207
当你想要在工作中分享文件, 并且希望其他人甚至一群人给你反馈, 然后交还给你作修改,并存下修正过的不同版本, 再进行反覆讨论修正,你会怎么做呢?
通常我们会用电子邮件来传送这些档案, 向他人征求反馈, 並将不同版本的文件存放在本地,但是这并不是最好的解决方案, 当文件越来越多要共享, 当越来越多人要进行协作, 电子邮件可能不是一个好的工具。
亚马逊AWS最近推出了一项全新的企业云存储和分享服务Amazon Zocalo (城市“中央广场”的意思)，以Zocalo 命名, 是想表达这个服务就像是一个中央的...
分类：
其他好文 时间：
2014-07-17 21:13:00
阅读次数：
351
很多程序员的项目常常半途而废。他们有那么多的好点子，但是很多都流于空想。几乎每一个软件开发者都有一个这样的文件夹，里面很多都是些还没完工的项目，而这些程序里有不少在它诞生初期真心是个超棒的点子。和这些人一样，我也有很多好主意，有的甚至就是现在有些企业在用的。比如正决定着在eBay上还是在Amazon...
分类：
其他好文 时间：
2014-07-16 23:00:27
阅读次数：
208
环境是Mac OSX。尝试了一下amazon的EC2服务，注册基本比较简单，需要一张信用卡。进入控制台后选择EC2，点击launch instance，选择free tier的Amazon linux，一路点下去。比较重要的是保存好key pair，之后连接主机需要。网上看是以.pem为后缀的，但我...
分类：
其他好文 时间：
2014-07-09 15:41:11
阅读次数：
212
SQS即Simple Queue Service, 是一个分布式的消息队列服务,使用它非常简单,消息队列服务可以用来buffer burst, 使整个服务异步处理,不要求组件始终可用.
开发人员最初使用 Amazon SQS 时只需用到五个 API：
CreateQueue、SendMessage、ReceiveMessage、ChangeMessageVisibility 和 DeleteM...
分类：
其他好文 时间：
2014-07-03 13:29:36
阅读次数：
163
Spark目前支持多种分布式部署方式：一、Standalone Deploy Mode；二Amazon EC2、；三、Apache Mesos；四、Hadoop YARN。第一种方式是单独部署，不需要有依赖的资源管理器，其它三种都需要将spark部署到对应的资源管理器上。 除了部署的多种方式之...
分类：
其他好文 时间：
2014-07-02 13:48:43
阅读次数：
299
上篇豆子回顾了怎么创建一个基本的用户组和用户并绑定MFA设备，这一篇我们来看看如何自定义Roles（角色），该角色绑定的EC2的实例将自动有权限访问S3bucket。豆子还做了一个对比试验来验证该自定义角色是否工作。首先点开IAM，CreateNewRole取名叫做EC2-S3选择AmazonEC2,注意说..
分类：
其他好文 时间：
2014-07-02 06:08:53
阅读次数：
300
关于Amazon S3的数据一致性模型有两种：
撒旦发
有以下几种行为：
1 写一个新的object，然后开始读它，直到所有的变化都传播完（副本），你才能读到它，否则就是key does not exist。
2 写一个新的object，然后listkeys，直到所有的变化都传播完，你才能看到它。
3 覆盖一个已有的object，然后开始读它，直到所有的变化都传播完，你才能拿到最新的ob...
分类：
其他好文 时间：
2014-07-01 08:56:53
阅读次数：
291
