系列教程: 手把手教你写电商爬虫-第一课 找个软柿子捏捏 手把手教你写电商爬虫-第二课 实战尚妆网分页商品采集爬虫 看完两篇,相信大家已经从开始的小菜鸟晋升为中级菜鸟了,好了,那我们就继续我们的爬虫课程。 上一课呢一定是因为对手太强,导致我们并没有完整的完成尚妆网的爬虫。 吭吭~,我们这一课继续,争 ...
分类:
Web程序 时间:
2016-05-16 19:26:57
阅读次数:
271
一般来说,电商数据架构是比较复杂的,做过电商的同学都有深刻的体会。具体复杂在什么地方呢,举几个具体的例子:1 每种商品都有自己的独特属性。比如鞋子和电脑的属性是完全不一样的。如何对他们构造商品数据架构?2 如何维护它们。不至于因为业务的发展,使得数据结构变得异常复杂而无法拓展和维护?3 未来可能会卖 ...
分类:
其他好文 时间:
2016-05-14 06:35:01
阅读次数:
204
TPCC-MYSQL是由percona发布一个用来测试数据库的压力工具,模拟一个电商的业务, 主要的业务有新增订单,库存查询,发货,支付等模块的测试 1.下载 2.安装 1.解压 cd scr ; make make命令会在tpcc-mysql目录下生成 tpcc 命令行工具 tpcc_load , ...
分类:
数据库 时间:
2016-05-13 13:03:11
阅读次数:
255
系列教程 手把手教你写电商爬虫-第一课 找个软柿子捏捏 如果没有看过第一课的朋友,请先移步第一课,第一课讲了一些基础性的东西,通过软柿子"切糕王子"这个电商网站好好的练了一次手,相信大家都应该对写爬虫的流程有了一个大概的了解,那么这课咱们就话不多说,正式上战场,对垒尚妆网。 首先,向我们被爬网站致敬 ...
分类:
其他好文 时间:
2016-05-13 11:29:35
阅读次数:
154
话说现在基本上大家都在网上买东西,国家经济数据已经可以在网络购物的数据中略微窥见一二,再加上目前B2B行业的持续火爆,大有把所有交易搬到网上来的趋势,这个系列教程就来讲讲如果爬取这些大量的电商交易的数据。 工具要求:教程中主要使用到了 1、神箭手云爬虫框架 这个是爬虫的基础,2、Chrome浏览器和 ...
分类:
其他好文 时间:
2016-05-13 11:13:22
阅读次数:
255
这篇文章仅用来记录工作中遇到的奇奇怪怪现象 IE系列: 在IE8中,a标签不支持after、before。 在IE8中,背景透明色不能用,可以用一张背景透明的png图来解决。 没有只针对IE8的css hack。 康美电商工作系列: 设计图上的错别字要甄别,并告知设计师,以防止后续不断更改。 CSS ...
分类:
其他好文 时间:
2016-05-13 10:19:29
阅读次数:
129
某电商是某大型服装集团下的重要销售平台。2015 年,该集团品牌价值达数百亿元,产品质量、市场占有率、出口创汇、销售收入连年居全国绒纺行业第一,在中国有终端店3000多家,零售额80 亿。其羊绒制品年产销能力1000万件以上的规模,占有中国的40%和世界的30%的市场份额。 该集团旗下的电商部门主要 ...
分类:
其他好文 时间:
2016-05-13 10:02:40
阅读次数:
191
某电商是某大型服装集团下的重要销售平台。2015
年,该集团品牌价值达数百亿元,产品质量、市场占有率、出口创汇、销售收入连年居全国绒纺行业第一,在中国有终端店3000多家,零售额80
亿。其羊绒制品年产销能力1000万件以上的规模,占有中国的40%和世界的30%的市场份额。该集团..
分类:
其他好文 时间:
2016-05-13 05:05:09
阅读次数:
199
话说现在基本上大家都在网上买东西,国家经济数据已经可以在网络购物的数据中略微窥见一二,再加上目前B2B行业的持续火爆,大有把所有交易搬到网上来的趋势,这个系列教程就来讲讲如果爬取这些大量的电商交易的数据。工具要求:教程中主要使用到了1、神箭手云爬虫框架这个是爬..
分类:
其他好文 时间:
2016-05-13 04:51:42
阅读次数:
178