码迷,mamicode.com
首页 >  
搜索关键字:spark streaming 作业 容错    ( 29616个结果
ASP 作业题
1.什么是Cookie对象:是一个由网页服务器放在您硬盘上的非常小的文本文件. 它本质上就像您的身份证明一样,并且不能像代码那样被执行或被用来散布病毒。它只能被您使用并且只能由提供的服务器读取. 什么是Session对象:session对象主要用于保存用户的各种信息,知道它的生命周期(一般是900....
分类:Web程序   时间:2014-06-07 02:15:38    阅读次数:296
2014中国未来网络产业高峰论坛开幕在即
2014中国未来网络产业高峰论坛送票了,会议为了响应大家的声音,为大家提供了免票名额!即日起,将给热爱互联网,关注中国互联网发展的各位同胞们送出30张普通门票(每张价值400元)和5张VIP门票(每张价值2000元)!为大家提供参与这场业界盛宴的机会,机会难得,不容错过!会议注册地址:http://...
分类:其他好文   时间:2014-06-04 21:58:16    阅读次数:185
使用spring rest插入数据库时发生了 前言中不允许有内容 错误
该错误一般是编码带来的问题,比如在请求post的时候,使用了application/x-www-form-urlencoded的content type那么请求传过来的string则需要用urlDecoder进行decode。否则就会报上述错误body = java.net.URLDecoder.d...
分类:数据库   时间:2014-05-30 21:52:15    阅读次数:237
用python + hadoop streaming 编写分布式程序(二) -- 在集群上运行与监控
写在前面前文:用python + hadoop streaming 编写分布式程序(一) -- 原理介绍,样例程序与本地调试为了方便,这篇文章里的例子均为伪分布式运行,一般来说只要集群配置得当,在伪分布式下能够运行的程序,在真实集群上也不会有什么问题。为了更好地模拟集群环境,我们可以在mapred-...
分类:编程语言   时间:2014-05-30 14:56:56    阅读次数:309
Apache Spark源码走读之12 -- Hive on Spark运行环境搭建
Hive是基于Hadoop的开源数据仓库工具,提供了类似于SQL的HiveQL语言,使得上层的数据分析人员不用知道太多MapReduce的知识就能对存储于Hdfs中的海量数据进行分析。由于这一特性而收到广泛的欢迎。Hive的整体框架中有一个重要的模块是执行模块,这一部分是用Hadoop中MapRed...
分类:其他好文   时间:2014-05-30 14:23:07    阅读次数:409
Apache Storm源码阅读笔记
自从建了Spark交流的QQ群之后,热情加入的同学不少,大家不仅对Spark很热衷对于Storm也是充满好奇。大家都提到一个问题就是有关storm内部实现机理的资料比较少,理解起来非常费劲。尽管自己也陆续对storm的源码走读发表了一些博文,当时写的时候比较匆忙,有时候衔接的不是太好,此番做了一些整...
分类:其他好文   时间:2014-05-30 07:25:09    阅读次数:286
linux下定时执行脚本
cron是一个linux下的定时执行工具,可以在无需人工干预的情况下运行作业。由于Cron 是Linux的内置服务,但它不自动起来,可以用以下的方法启动、关闭这个服务: 1.cron的启动/sbin/service crond start //启动服务/sbin/service crond stop...
分类:系统相关   时间:2014-05-30 06:07:07    阅读次数:312
学习Fragment遇到的一个报错
从现在开始,在博客园上记录自己遇到的所有android开发问题:布局文件内容: 错误信息:05-28 21:05:59.976: W/dalvikvm(4638): threadid=1: thread exiting with uncaught exception (...
分类:其他好文   时间:2014-05-30 01:51:26    阅读次数:337
程序员技术练级攻略
前言你是否觉得自己从学校毕业的时候只做过小玩具一样的程序?走入职场后哪怕没有什么经验也可以把以下这些课外练习走一遍(朋友的抱怨:学校课程总是从理论出发,作业项目都看不出有什么实际作用,不如从工作中的需求出发)建议:不要乱买书,不要乱追新技术新名词,基础的东西经过很长时间积累而且还会在未来至少10年通...
分类:其他好文   时间:2014-05-29 20:18:57    阅读次数:387
【spark系列3】spark开发简单指南
分布式数据集创建之textFile 文本文件的RDDs能够通过SparkContext的textFile方法创建,该方法接受文件的URI地址(或者机器上的文件本地路径,或者一个hdfs://, sdn://,kfs://,其他URI).这里是一个调用样例:scala> val distFile...
分类:其他好文   时间:2014-05-29 18:58:27    阅读次数:429
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!