Truck HistoryTime Limit:2000MSMemory Limit:65536KTotal Submissions:19122Accepted:7366DescriptionAdvanced Cargo Movement, Ltd. uses trucks of different...
分类:
其他好文 时间:
2014-11-13 01:50:18
阅读次数:
120
当我们在运行作业的过程中也可以查看Web控制台的信息:此时发现了一个作业ID,点击进入可以查看作业进一步的信息:进一步看通过Web控制台看SparkWorker1中的Container中的运行信息:刷新Web控制台:
分类:
其他好文 时间:
2014-11-12 22:54:40
阅读次数:
241
大数据“火”的有段日子了,原来打算学习hadoop……后知道spark要比hadoop更牛,故而转学spark。其原码为scala所写,为了更好的研究spark,故又开始学习scala.将自己所学记录在此,不为点赞,只为加深记忆,加深理解…不是都说写一遍等于读十遍嘛……1、基本类型: Byte...
分类:
其他好文 时间:
2014-11-12 22:40:41
阅读次数:
257
目前,SPARK在大数据处理领域十分流行。尤其是对于大规模数据集上的机器学习算法,SPARK更具有优势。一下初步介绍SPARK在linux中的部署与使用,以及其中聚类算法的实现。...
分类:
编程语言 时间:
2014-11-12 21:21:04
阅读次数:
264
/*
*Author : DavidLin
*Date : 2014-11-11pm
*Email : linpeng1577@163.com or linpeng1577@gmail.com
*world : the city of SZ, in China
*Ver : 000.000.001
*history : editor...
分类:
系统相关 时间:
2014-11-11 21:08:37
阅读次数:
294
以Html5 History API为关键词搜索,会得到很多结果,我仅根据自己的使用整理。1、两个APIpushState和replaceState。pushState向浏览器历史记录里增加一个状态,供浏览器后退前进时使用,用法history.pushState(data, '页面标题', url)...
进入 $HADOOP/bin一.文件操作文件操作 类似于正常的linux操作前面加上“hdfs dfs -”前缀也可以写成hadoop而不用hdfs,但终端中显示Use of this script to execute hdfs command is deprecated.Instead use ...
分类:
其他好文 时间:
2014-11-11 18:42:45
阅读次数:
226
笔记:在配置好了spark后,如果需要添加/删除一个结点需要修改如下配置文件cd $HADOOP/etc/hadoop 进入hadoop配置文件夹下修改 slaves,将对应的节点添加/删除修改hdfs-site.xml , 修改hdfs副本的数量。cd $SPARK_HOME/conf 进入spa...
分类:
其他好文 时间:
2014-11-11 14:08:26
阅读次数:
589
package com.gstone.history.entity;import java.sql.Types;import org.hibernate.Hibernate; import org.hibernate.dialect.MySQLDialect;public class BlobMyS...
分类:
数据库 时间:
2014-11-11 10:46:21
阅读次数:
247
1、同步时钟自动同步crontab -e输入如下内容 01*** /usr/sbin/ntpdate us.pool.ntp.org2、配置主机名gedit /etc/sysconfig/network 修改主机名如下NETWORKING=yes #启动网络NETWORKING_IPV6=noHOS...
分类:
其他好文 时间:
2014-11-10 21:45:00
阅读次数:
201