随着BIG DATA大数据概念逐渐升温，如何搭建一个能够采集海量数据的架构体系摆在大家眼前。如何能够做到所见即所得的无阻拦式采集、如何快速把不规则页面结构化并存储、如何满足越来越多的数据采集还要在有限时间内采集。这篇文章结合我们自身项目经验谈一下。我们来看一下作为人是怎么获取网页数据的呢？1、打开浏...
分类：
其他好文 时间：
2014-07-10 12:32:08
阅读次数：
237
2014年初经过深思熟虑，确定方向数据挖掘，作为今后工作生涯的追随领域。 3月份开始看机器学习的课程，到了4月底，参加阿里巴巴的大数据竞赛，便把课程学习给落下了—— 一大遗憾。 比赛的成绩可想而知，由于知识储备不够，况且还是单干，只能说还行，从七千个队伍到前五百名内，再从三百名到一百多名，然后遇到....
分类：
其他好文 时间：
2014-07-10 00:35:54
阅读次数：
183
通信接口是webservice快还是scoket快webservice和scoket都可以做为通信接口，一个走HTTP访问，一个走TCP协议访问问1：通讯速度是webservice快还是scoket快问2：并发数量是webservice大还是scoket大问3：大数据包是webservice合适还是...
分类：
Web程序 时间：
2014-07-07 13:35:21
阅读次数：
212
◎新媒体品读，一个人人都是主编的移动阅读产品关键点：收集阅读。◎大数据华云数据许广彬：2014年初获5000万美金融资，底气是什么？京东与汽车之家联姻的背后 谁借谁的势？易观数据发布手机地图市场前三：高德、百度、图吧文化中国变身阿里影业后“第一发”：网罗编剧？入股Peel，阿里在硅谷买了个“梨”阿里...
分类：
其他好文 时间：
2014-07-01 21:42:14
阅读次数：
240
题记
这次《对象程序设计》课程设计，一共给定了8个选题（下载WORD版，PDF版），以及自由选题的机会。从大家初步选题结果来看（图1），绝大部分同学选择了“图形用户界面的计算器”，较少同学选择了3-8题中的一个。一方面，可以看出大家目前的动手能力还有待提高，教师的教学水平还不能给予学生较多的帮助；另一方面，学生缺乏“主动选择、对自己负责”的能力，和从小学到大学一直是被动学习状态有关。李雅...
分类：
其他好文 时间：
2014-07-01 15:13:48
阅读次数：
344
(Procedure Language,过程化语言)SQL 1999各大数据库厂商通用的一种结构化语言 PL/SQL只支持Oracle数据库
基本语法
多行注释 /* */ 单行注释 --
PLSQL程序块
结构
[declare]
定义变量
begin
过程语句
[exception]
处理 异常
end;
例子 输出helloworld
begin
dbms_output.put_line('hello');
end;
--如果...
分类：
数据库 时间：
2014-07-01 11:23:51
阅读次数：
313
我记得早在2001年，Gartner公司的一份研究报告首次出现“大数据（BigData）”概念的提法。但是到今天业内对“大数据”一词的定义说法不一，但越来越多的研究机构和网络媒体开始关注它。大数据正成为继云计算之后新的热词。同云计算一样，大数据虽然也看不见摸不到，却与今天的I..
分类：
其他好文 时间：
2014-07-01 09:57:44
阅读次数：
263
上章，我简单描述了国外IT巨头在大数据方面的应用和战略，本章我们来看一下国内互联网公司如何理解大数据的。随着互联网各类网络应用的不断深入，中国的大数据技术与应用的快速发展已成为不容忽视的事实。目前国内各IT企业，特别是大型互联网企业，都开始对大数据的存储、处理..
分类：
其他好文 时间：
2014-07-01 09:39:28
阅读次数：
205
(Procedure Language,过程化语言)SQL 1999各大数据库厂商通用的一种结构化语言 PL/SQL只支持Oracle数据库
基本语法
多行注释 /* */ 单行注释 --
PLSQL程序块
结构
[declare]
定义变量
begin
过程语句
[exception]
处理 异常
end;
例子 输出helloworld
begin
dbms_output.put_line('hello');
end;
--如果...
分类：
数据库 时间：
2014-06-30 18:55:36
阅读次数：
337
7月2号晚20:30-22:30 东大博士Dasight分享主题《大数据与Hadoop漫谈》
7月5号晚20:30-22:30 原支付宝MySQL首席DBA分享主题《MySQL发展趋势,MySQL各个分支介绍》、《MySQL 5.6版本特性介绍及如何从MySQL 5.5向MySQL
5.6》
7月10号晚20:30-22:30 东大博士Dasight分享主题《Hadoop与Nosql技术的适用性分析》
7月12号晚20:30-22:30 原支付宝MySQL首席DBA分享主题《1000+MySQ...
分类：
数据库 时间：
2014-06-30 08:40:53
阅读次数：
315
