随着BIG DATA大数据概念逐渐升温,如何搭建一个能够采集海量数据的架构体系摆在大家眼前。如何能够做到所见即所得的无阻拦式采集、如何快速把不规则页面结构化并存储、如何满足越来越多的数据采集还要在有限时间内采集。这篇文章结合我们自身项目经验谈一下。我们来看一下作为人是怎么获取网页数据的呢?1、打开浏...
分类:
其他好文 时间:
2014-07-10 12:32:08
阅读次数:
237
2014年初经过深思熟虑,确定方向数据挖掘,作为今后工作生涯的追随领域。 3月份开始看机器学习的课程,到了4月底,参加阿里巴巴的大数据竞赛,便把课程学习给落下了—— 一大遗憾。 比赛的成绩可想而知,由于知识储备不够,况且还是单干,只能说还行,从七千个队伍到前五百名内,再从三百名到一百多名,然后遇到....
分类:
其他好文 时间:
2014-07-10 00:35:54
阅读次数:
183
通信接口是webservice快还是scoket快webservice和scoket都可以做为通信接口,一个走HTTP访问,一个走TCP协议访问问1:通讯速度是webservice快还是scoket快问2:并发数量是webservice大还是scoket大问3:大数据包是webservice合适还是...
分类:
Web程序 时间:
2014-07-07 13:35:21
阅读次数:
212
◎新媒体品读,一个人人都是主编的移动阅读产品关键点:收集阅读。◎大数据华云数据许广彬:2014年初获5000万美金融资,底气是什么?京东与汽车之家联姻的背后 谁借谁的势?易观数据发布手机地图市场前三:高德、百度、图吧文化中国变身阿里影业后“第一发”:网罗编剧?入股Peel,阿里在硅谷买了个“梨”阿里...
分类:
其他好文 时间:
2014-07-01 21:42:14
阅读次数:
240
ps:给自己浮躁的心加点冰 曾有个月薪三千的妹子,编的稿件漏洞百出,我怒拍桌子,她却回了句:“一个月三千块工资,你还想怎么样!”琢磨她这话挺有意思,就像我们买了件便宜货,用不了两天就坏了,于是宽慰自己:就花那么点钱买的东西,你还想怎么样?当然,她的潜台词是,你给我八千,我自然就做得好好的。但问题.....
分类:
其他好文 时间:
2014-07-01 20:44:33
阅读次数:
196
(Procedure Language,过程化语言)SQL 1999各大数据库厂商通用的一种结构化语言 PL/SQL只支持Oracle数据库
基本语法
多行注释 /* */ 单行注释 --
PLSQL程序块
结构
[declare]
定义变量
begin
过程语句
[exception]
处理 异常
end;
例子 输出helloworld
begin
dbms_output.put_line('hello');
end;
--如果...
分类:
数据库 时间:
2014-07-01 11:23:51
阅读次数:
313
(传智播客学员感言,铁的事实在说话!)
亲爱的老师:
感谢你们在这几个月对我的帮助,使我对PHP从一无所知到熟练掌握,并在即将毕业的时候顺利找到一份不错的工作。
来传智学PHP可以说是很偶然也是很幸运的,我之前下过网页设计视频,但从没有看过,我们班有几个同学在这培训,他们说这培训的不错而且培训完后工资很高,我就想也来试试。当时咨询的时候想学网页设计,在即将来北京培训的...
分类:
其他好文 时间:
2014-07-01 10:43:35
阅读次数:
203
上章,我简单描述了国外IT巨头在大数据方面的应用和战略,本章我们来看一下国内互联网公司如何理解大数据的。随着互联网各类网络应用的不断深入,中国的大数据技术与应用的快速发展已成为不容忽视的事实。目前国内各IT企业,特别是大型互联网企业,都开始对大数据的存储、处理..
分类:
其他好文 时间:
2014-07-01 09:39:28
阅读次数:
205
(Procedure Language,过程化语言)SQL 1999各大数据库厂商通用的一种结构化语言 PL/SQL只支持Oracle数据库
基本语法
多行注释 /* */ 单行注释 --
PLSQL程序块
结构
[declare]
定义变量
begin
过程语句
[exception]
处理 异常
end;
例子 输出helloworld
begin
dbms_output.put_line('hello');
end;
--如果...
分类:
数据库 时间:
2014-06-30 18:55:36
阅读次数:
337
7月2号晚20:30-22:30 东大博士Dasight分享主题《大数据与Hadoop漫谈》
7月5号晚20:30-22:30 原支付宝MySQL首席DBA分享主题《MySQL发展趋势,MySQL各个分支介绍》、《MySQL 5.6版本特性介绍及如何从MySQL 5.5向MySQL
5.6》
7月10号晚20:30-22:30 东大博士Dasight分享主题《Hadoop与Nosql技术的适用性分析》
7月12号晚20:30-22:30 原支付宝MySQL首席DBA分享主题《1000+MySQ...
分类:
数据库 时间:
2014-06-30 08:40:53
阅读次数:
315