利用xpath()分析抓取数据还是比较简单的,只是网址的跳转和递归等比较麻烦。耽误了好久,还是豆瓣好呀,URL那么的规范。唉,亚马逊URL乱七八糟的.... 可能对url理解还不够. amazon
├──?amazon
│??...
分类:
编程语言 时间:
2014-08-22 05:03:45
阅读次数:
3369
环境:EC2创建后windows2012系统Iis配置完成成功访问网站,但外部解析不能访问,首先加固定ip然后需要加VPC对映ip本文解决的问题是:(URL)公网不能访问亚马逊云内部IIS问题如下图EC2完成:做到这个样子然后第一步:完成后列表Instance无面是空执行就在这里绑定IP地址第二步:...
分类:
Web程序 时间:
2014-08-21 19:10:54
阅读次数:
218
aws ec2 远程连接,注册失败 解决办法 timeout
分类:
其他好文 时间:
2014-08-21 14:48:44
阅读次数:
196
今天我们来看看DynamoDb的设计思想。
DynamoDB主要是想要达到高可用性(availability),因为CAP理论,所以只能牺牲一致性了,但是会实现最终一致性。...
分类:
数据库 时间:
2014-08-20 12:33:32
阅读次数:
326
DynamoDB的数据是存储在SSD(Solid State Drive,固态硬盘),这样可在预测的低延迟响应时间之内,存储和访问任何规模的数据,另外SSD 还具有很高的 I/O 性能,能够处理大规模请求工作负载。我们来看看DynamoDB的不适合的使用场景:如果需要存储大量数据,但这些数据的访问频率很低,则 DynamoDB 可能不太适合。...
分类:
数据库 时间:
2014-08-20 12:32:42
阅读次数:
269
在DynamoDB中,database是table的集合,table是item的集合,item是attribute的集合。attribute是name-value对。value可以是单值属性也可以是多值属性(集合)。一个item的大小不能超过64KB。...
分类:
数据库 时间:
2014-08-20 12:32:32
阅读次数:
418
所谓坑, 就是文档中没有标明的特别需要处理的细节, 工作中会被无故的卡住各种令人恼火的问题. 包括系统级的bug和没有文档化的限制.继Android的各种坑后, 现在做Amazon平台, 遇到的坑很多, 这里记录一下备忘:先汇总下Android Native下的各种问题, 当然有些限制有明确文档说明...
分类:
其他好文 时间:
2014-08-19 18:40:45
阅读次数:
386
当你的数据规模达到PB级别的时候,想要移动这样大规模数据时就会变的费时费力,这也是企业在利用AWS规模化和弹性优势处理分析任务时面临的最大挑战之一。本文主要介绍了加速文件传输协议,谈到如何利用Tsunami DUP实现将大规模数据迁移到云中,其中利用UDP处理数据传输,TCP负责连接控制。...
分类:
其他好文 时间:
2014-08-18 18:45:49
阅读次数:
310
1. IT公司:
大多都在Financial District的主干道:1 Market Street上或其附近。比如Twitter, Amazon, Salesforce, Autodesk, Yelp, ifttt, Nitro, Nitrous等等等。
2.美食推荐:
a. 中国城御食园 Z&Y Restaurant,川菜做得超级正宗,竟然还有川北凉粉,豆腐脑之类的,餐厅火爆程...
分类:
其他好文 时间:
2014-08-17 10:28:42
阅读次数:
192
Cassandra 的数据存储结构 Cassandra 的数据模型是基于列族(Column Family)的四维或五维模型。它借鉴了 Amazon 的 Dynamo 和 Google‘s BigTable 的数据结构和功能特点,采用 Memtable 和 SSTable 的方式进行存储...
分类:
其他好文 时间:
2014-08-17 01:14:11
阅读次数:
363