码迷,mamicode.com
首页 >  
搜索关键字:mapr    ( 365个结果
Hadoop Mapreduce的框架组成
MapReduce的输入输出 一个MapReduce作业的输入和输出类型:会有三组<key , value>键值对类型的存在 Mapreduce作业的处理流程 按照时间顺序包括: 输入分片(input split) 在进行map计算之前,mapreduce根据输入文件计算输入分片,每个输入分片针对一 ...
分类:其他好文   时间:2018-01-27 21:21:58    阅读次数:196
Spark调优秘诀——超详细
版权声明:本文为博主原创文章,转载请注明出处。 Spark调优秘诀 1.诊断内存的消耗 在Spark应用程序中,内存都消耗在哪了? 1.每个Java对象都有一个包含该对象元数据的对象头,其大小是16个Byte。由于在写代码时候,可能会出现这种情况:对象头比对象本身占有的字节数更多,比如对象只有一个i ...
分类:其他好文   时间:2018-01-21 01:13:10    阅读次数:6082
SparkCore基础(一)
* SparkCore基础(一) 学习Spark,首先要熟悉Scala,当然你说你会Python或者Java能不能玩Spark?能!但是不推荐,首推Scala,因为Scala非常便捷,而且Scala有非常好的交互式编程体验(当然了,在这里,Python也不差)。其次呢,我们要对Hadoop的MapR ...
分类:其他好文   时间:2018-01-12 22:39:57    阅读次数:1529
Real Time Credit Card Fraud Detection with Apache Spark and Event Streaming
https://mapr.com/blog/real-time-credit-card-fraud-detection-apache-spark-and-event-streaming/ Editor's Note: Have questions about the topics discussed ...
分类:Web程序   时间:2018-01-09 22:16:42    阅读次数:293
Hive on Spark安装与配置(无数坑)
Hive on Spark是由Cloudera发起,由Intel、MapR等公司共同参与的开源项目,其目的是把Spark作为Hive的一个计算引擎,将Hive的查询作为Spark的任务提交到Spark集群上进行计算。通过该项目,可以提高Hive查询的性能,同时为已经部署了Hive或者Spark的用户提供了更加灵活的选择,从而进一步提高Hive和Spark的普及率。
分类:其他好文   时间:2018-01-08 11:04:56    阅读次数:350
找到多个与名为“Home”的控制器匹配的类型
“/”应用程序中的服务器错误。 找到多个与名为“Home”的控制器匹配的类型。如果为此请求(“{controller}/{action}/{id}”)提供服务的路由没有指定命名空间以搜索与此请求相匹配的控制器,则会发生这种情况。如果是这样,请通过调用带有 'namespaces' 参数的 "MapR ...
分类:其他好文   时间:2018-01-07 15:59:24    阅读次数:184
MVC自定义视图引擎地址
先看结构 1、RouteConfig 文件(注意顺序) 2、新增文件 MyRazorViewEngine 3、Global.asax 效果图 ...
分类:Web程序   时间:2018-01-05 01:19:14    阅读次数:212
MVC操作
1、在Models下写处理程序的类 2、在Controllers下加入控制器 3、在Views加文件夹(与控制器同名),再加视图名称 MVC的程序入口:App_Start/RouteConfig下的Default路由来确定。 ...
分类:Web程序   时间:2018-01-03 22:43:16    阅读次数:276
全栈Python 必备库
强大的库: 转自:微信公众号 Python最棒的地方之一,就是大量的第三方库,覆盖之广,令人惊叹。Python 库有一个缺陷就是默认会进行全局安装。为了使每个项目都有一个独立的环境,需要使用工具virtualenv,再用包管理工具pip和virtualenv配合工作。 尽管都可以求助于google或 ...
分类:编程语言   时间:2017-12-26 17:46:51    阅读次数:395
Hadoop 对MapReduce的理解
对MapReduce的理解 客户端启动一个作业 向JobTraker请求一个JobId 将资源文件复制到HDFS上,包括Jar文件,配置文件,输入划分信息等 接收作业后,进入作业队列,根据输入划分信息为每个划分创建一个map任务,并将map任务分配给TaskTracker来执行(运算移动,数据不移动 ...
分类:其他好文   时间:2017-12-23 19:02:01    阅读次数:149
365条   上一页 1 ... 19 20 21 22 23 ... 37 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!