Hadoop的前景随
着云计算、大数据迅速发展,亟需用hadoop解决大数据量高并发访问的瓶颈。谷歌、淘宝、百度、京东等底层都应用hadoop。越来越多的企
业急需引入hadoop技术人才。由于掌握Hadoop技术的开发人员并不多,直接导致了这几年hadoop技术的薪水远高于JavaEE及
Android程..
分类:
其他好文 时间:
2015-01-14 18:25:07
阅读次数:
169
为什么QQ和微信只能有一个,而电商却符合7原则?...
分类:
其他好文 时间:
2015-01-14 17:57:24
阅读次数:
173
好久没写博客了,一方面这段时间公司的事情项目比较多,另一方面自己也有准备成立自己的个人工作室,所以一直没顾得上去总结写一下技术博客,今天正好有点时间就来一篇吧。
这段时间一直在进行开发商城的APP(Android和IOS),也研究一下国内绝大多数的电商APP(例如:淘宝,京东,天猫,苏宁易购,顺丰优选等等),他们的商品分类其实大多数属于常见格调:列表-点击二级列表-具体三级分类列表...
分类:
移动开发 时间:
2015-01-13 10:39:37
阅读次数:
146
华硕Fonepad 7采用英特尔Z2520双核处理器,系统内存保持1GB/2GB容量不变,加入了更小的4GB可选容量,同时最大8GB容量两档可供用户选择。常用的TF卡接口也依旧得以保留。全新设计的机身外观以及多色配色,与目前主流的产品定位和用户审美达到一致
FonePad7在京东如今只要599元,可以说是性价比最值得7寸通话平板了。可是由于华硕和Intel的基友关系,该机使用...
分类:
其他好文 时间:
2015-01-12 21:05:28
阅读次数:
433
第三部分替换默认下载器,使用selenium下载页面对详情页稍加分析就可以得出:我们感兴趣的大部分信息都是由javascript动态生成的,因此需要先在浏览器中执行javascript代码,再从最终的页面上抓取信息(当然也有别的解决方案)。scrapy本身提供了Middleware机制。利用Dowloader..
分类:
编程语言 时间:
2015-01-12 11:09:41
阅读次数:
371
第一部分:任务描述起始页面:http://shanhuijj.tmall.com/search.htm?spm=a1z10.3-b.w4011-3112923129.1.KjGkS2这个页面列出了网店的所有宝贝,如图:点击进入宝贝详情页面,例如:http://detail.tmall.com/item.htm?spm=a1z10.3-b.w4011-3112923129.62.xGx75B&id=1091021..
分类:
编程语言 时间:
2015-01-12 06:55:47
阅读次数:
800
第二部分抽取起始页中进入宝贝详情页面的链接创建项目,并生成spider模板,这里使用crawlspider。2.在中scrapyshell中测试选取链接要使用的正则表达式。首先使用firefox和firebug查看源码,定位到要链接然后在shell中打开网页:scrapyshellhttp://shanhuijj.tmall.com/search.h..
分类:
编程语言 时间:
2015-01-12 06:53:47
阅读次数:
945
“买卖买卖,有买还有卖”……这句话道出了零售行业的本质,通晓买与卖这两个环节才能真正做好零售业。如今时代今非昔比,移动化、社交化、大数据化正在快速影响和颠覆各个行业。零售业其实是首当其冲,庞大的消费人群、丰富的消费记录、种类繁多的商品信息、日渐改变的消费习..
分类:
其他好文 时间:
2015-01-10 10:07:59
阅读次数:
287
导语 马云承认“京东是个悲剧”的言论是自己说的,但限于“友人间的吹牛聊天”,拿来公开报道,对大家都不公平,特别是对京东可能会造成无端的困扰和添乱,深表歉意。 1 月 7 日,中国企业家官方微信摘编了方兴东和刘伟撰写的《阿里巴巴正传》中马云对京东的一段评论。微信发出后,各家媒体纷纷转载,引发网友热议。...
分类:
其他好文 时间:
2015-01-09 10:33:02
阅读次数:
156
1.1 系统架构设计目录摘要:双11来临之际,《程序员》以“电商峰值系统架构设计”为主题,力邀京东、当当、小米、1号店、海尔商城、唯品会、蘑菇街、麦包包等电商企业,及商派、基调网络等服务公司,分享电商峰值系统架构设计的最佳技术实践。自2009年11月11日,淘宝商城(现名天猫)拉开网购狂欢节的序幕,...
分类:
其他好文 时间:
2015-01-08 11:00:37
阅读次数:
1490