引自:https://blog.csdn.net/tomcat_2014/article/details/50582547 一 .Amazon S3介绍 Amazon Simple Storage Service (Amazon S3) 是一种对象存储,它具有简单的 Web 服务接口,可用于在 We ...
分类:
其他好文 时间:
2018-06-06 21:36:07
阅读次数:
191
摘要: 微处理架构——处理复杂事物 许多公司,比如Amazon、eBay和NetFlix,通过采用微处理结构模式解决了上述问题。其思路不是开发一个巨大的单体式的应用,而是将应用分解为小的、互相连接的微服务。 微服务正在博客、社交媒体讨论组和会议演讲中获得越来越多的关注,在Gartner的2014 H ...
分类:
其他好文 时间:
2018-05-31 19:20:37
阅读次数:
139
为什么需要 Stream Stream 作为 Java 8 的一大亮点,它与 java.io 包里的 InputStream 和 OutputStream 是完全不同的概念。它也不同于 StAX 对 XML 解析的 Stream,也不是 Amazon Kinesis 对大数据实时处理的 Stream ...
分类:
编程语言 时间:
2018-05-28 12:39:06
阅读次数:
222
Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。 其可以应用在数据挖掘,信息处理或存储历史数据等一系列的程序中。其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的, 也可以应用在获取API所返回的数据(例如 Amazon Associates Web Services ) ...
分类:
其他好文 时间:
2018-05-22 17:21:58
阅读次数:
182
阿里巴巴与四十大道 作者是阿里员工,做过媒体总编辑。全书是作者写的阿里故事集,从十八罗汉创业讲起,大事都是已公开的资料添加些细节,有一些内部故事,少部分是作者个人视角的故事。 总体评价3星,有点意思。 以下是书中一些内容的摘抄,#号后面是kindle电子版中的页码,【】中是我根据上下文补充的信息: ...
分类:
其他好文 时间:
2018-05-17 20:42:04
阅读次数:
581
Netflix 很关注CPU的Steal Time。他们的策略是:如果是当前虚拟机的Steal Time 超过了你们设置的 阈值,他们会关闭这台虚拟机并且在另外一台物理机上面重启。 如果你想要部署虚拟环境(例如:Amazon EC2), steal time就是你想要关注的性能指标之一。 如果这个指 ...
分类:
其他好文 时间:
2018-05-16 18:42:20
阅读次数:
654
作者:何足道链接:https://www.zhihu.com/question/21641778/answer/62523535来源:知乎著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。 你一定听说过云计算中的三个“高大上”的你一定听说过云计算中的三个“高大上”的概念:IaaS、 ...
分类:
其他好文 时间:
2018-05-14 14:09:23
阅读次数:
152
版本:Python3.6 库:atexit, re, threading, time, urllib3, bs4 亚马逊有反爬虫机制,header中至少要加入一个信息,此例中加入UA,不过仍然时常不好使,需要重复尝试。 输出结果: 与不引入线程的程序进行对比,主要有两个区别: 1.由于是并发处理模式 ...
分类:
编程语言 时间:
2018-05-08 16:36:47
阅读次数:
190
什么是DynamoDB Amazon DynamoDB分布式NoSQL数据库服务,支持动态扩展,性能可靠 DynamoDB基本概念 DynamoDB的组成 表:表示用来存储DynamoDB数据,它类似于关系型数据库的“表” 项目:表中可以有0 到 N(N > 0)个项目,它类似于关系型数据库的“行” ...
分类:
数据库 时间:
2018-04-22 10:42:15
阅读次数:
2260