第1章 引言随着互联网应用的广泛普及，海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的互联网应用，每天几十亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题。通过数据切分来提高网站性能，横向扩展数据层已经成为架构研发人员首选的方式。水平切分数据库：可以降低单...
分类：
数据库 时间：
2015-01-30 17:38:05
阅读次数：
244
第1章 引言随着互联网应用的广泛普及，海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的 互联网应用，每天几十亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题。通过数据切分来提高网站性能，横向扩展数据层已经成为架构研发人员首选的方式。水平切分数据库，可以降低...
分类：
数据库 时间：
2015-01-30 14:41:33
阅读次数：
276
目录一．准备安装Debian系统
1.1Debian简介
1.1.1介绍Debian版本
1.1.2Debian的正式发音
1.1.3Debian软件包管理
1.1.4Debian分支
1.1.5官方网站与文档
1.1.6介绍Debian7.1
1.2获得Debian发行版
1.2.1从镜像站点上下载ISO的镜像文件
1.2.2将ISO镜像文件制作成CD/DVD
1.2.3将ISO..
分类：
其他好文 时间：
2015-01-29 19:43:31
阅读次数：
706
目录一．准备安装CentOS
71.1CentOS简介1.1.1介绍CentOS
71.1.2官方网站与文档1.1.3CentOS软件包管理1.1.4CentOS的正式发音1.2获得CentOS发行版1.2.1从镜像站点上下载ISO的镜像文件1.2.2将ISO镜像文件制作成CD/DVD1.2.3将ISO镜像文件制作成USB
Live1.3收集硬件信息1.4硬盘分区..
分类：
其他好文 时间：
2015-01-29 19:41:59
阅读次数：
455
随着互联网应用的广泛普及，海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的互联网应用，每天百万级甚至上亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题。一、负载均衡技术负载均衡集群是由一组相互独立的计算机系统构成，通过常规网络或专用网络进行连接，由路由器衔...
分类：
数据库 时间：
2015-01-29 17:26:28
阅读次数：
217
var flashvars = {
f: 'ckplayer/m3u8.swf', //使用swf向播放器发送视频地址进行播放
a: 'video/m.m3u8', //m3u8文件
c: 0, //调用 ckplayer.js 配置播放器
p: 1, //自动播放视频
s: 4, //flash插件形式发送视频流地址给播放器进行播放
lv: 0, //注意，如果是直播，...
分类：
其他好文 时间：
2015-01-29 12:42:11
阅读次数：
906
var flashvars = {
f: 'ckplayer/m3u8.swf', //使用swf向播放器发送视频地址进行播放
a: 'video/m.m3u8', //m3u8文件
c: 0, //调用 ckplayer.js 配置播放器
p: 1, //自动播放视频
s: 4, //flash插件形式发送视频流地址给播放器进行播放
lv: 0, //注意，如果是直播，...
分类：
其他好文 时间：
2015-01-29 12:40:11
阅读次数：
167
日志字段格式：
id,ip,url,ref,cookie,time_stamp
把日志文件放到HDFS。仅取了1000行。
hadoop fs -put 1000_log hdfs://localhost:9000/user/root/input
计算PV。
scala> val textFile = sc.textFile("hdfs://localhost:9000/user/ro...
分类：
其他好文 时间：
2015-01-28 14:41:15
阅读次数：
421
角色QA：测试人员RD：开发人员BI：数据分析师PD：需求人员UED：交互设计ttid:用来统计数量。随着业务线的增加, 及每个业务的扩展, 为统计不同渠道下单量, 会为每个渠道申请一个ttid, 使用订单信息查询可以确认最终下单的ttid是否正确埋点测试：检查埋点数据正确性，埋点作用于PV、UV、...
分类：
其他好文 时间：
2015-01-27 16:15:31
阅读次数：
205
zhangwenzeTA的每日心情怒2014-8-29 17:30签到天数: 1 天连续签到: 1 天[LV.1]初来乍到8主题9帖子79积分管理员积分79发消息1、关于侵权问题 问题描述： a、例如NBA的资讯，如果直接用于展示会出现侵权问题被拒 b、视频带水印，...
分类：
其他好文 时间：
2015-01-26 19:08:02
阅读次数：
190
