使用Spark有一段时间了,现在记录spark调优的一些经验。1.textFile的minparitition,只是设置最小的partition数目,下界(比如3),当数据量大的时候,改参数不起作用。可以尝试设置成10002. reduceByKey的并行度,也就是reduce的数目。 2.1 s....
分类:
其他好文 时间:
2014-10-31 23:30:55
阅读次数:
326
1.安装JDK2.搭建TOMCAT: 下载tomcat7.0 双击%TOMCAT_PATH%/bin/startup.bat启动tomcat 浏览器打开http://localhost:8080,若显示如下界面,则配置成功:3.配置tomcat使用https协议 (1)生成安全证书 cd到%J...
分类:
数据库 时间:
2014-10-31 13:33:40
阅读次数:
316
在安装包,数据库升级过程中,大部分使用的是install shield。它的功能非常强大,不过就是太臃肿了。我们可能希望能够自定义,更加灵活一下。界面如:这是来自于codeproject上的一个开源项目,大家可以到这里面来更深入的了解,使用。TSWizard
分类:
数据库 时间:
2014-10-30 22:19:50
阅读次数:
199
一、去官网下载 Windows Live Write 组件 二、配置,选中其它服务,然后会到如下界面 主要是这里经常不知道选择什么,容易忘记。 下拉框选中metaweblog API 类型,把这个地址 (这是网易博客的api) http://os.blog.163.com/api/xmlrpc/me...
Part I:提问===========================1.更新关联、删除关联数据,需要注意哪些问题?以Instructor类为例说明。2. 已知某请假系统,请实现以下界面的功能。Part II:Contoso大学校园管理系统案例练习=========================...
分类:
其他好文 时间:
2014-10-30 13:18:27
阅读次数:
217
我们要破解一个游戏,首先要对该游戏有所了解,确定破解目标,发掘破解途径。因此,我们先安装该游戏并运行,出现如下界面: 这是一个Berry king游戏的推广广告,告诉我们安装该游戏可获得200金币。关掉该界面,进入游戏商店,我们可以在这里通过金币购买“提示”、“建议”、“大师...
分类:
其他好文 时间:
2014-10-29 23:43:00
阅读次数:
208
简单讲解如何MyEclipse上开发一个web project 以及如何部署的问题。
第一步: 创建一个web project
File -> New -> Web Project 将出现以下界面:
输入你的Project Name。Source Folder、Web root folder、Context root URL默认即可。
Sourc...
分类:
编程语言 时间:
2014-10-29 19:23:23
阅读次数:
181
又搞了个模板,这个模板应该ok,足以应付各种网络流了
题意:给n个点m 条边,其中每条边的流量有两个限制不能大于r不能小于l,求是否有可行解,如有输出每条边的流量
#include
#include
#include
#include
using namespace std;
const int maxn = 1000000;
const int oo = 0x3777777;
struct ...
分类:
其他好文 时间:
2014-10-29 14:49:09
阅读次数:
261
刚切换了工作空间,发现之前配置的Eclipse没了,又要重新弄,顺便记录一下自已对Eclipse的设置,以后再弄的话直接就可以比着来了。切换工作空间运行后,一个崭新的Eclipse就在眼前,不过好丑关掉Welcome,更丑的界面出来了一步一步来:一、改界面先改一下界面主题, Window -> Pr...
分类:
系统相关 时间:
2014-10-25 14:25:09
阅读次数:
421
题意很简单:
给出一张有向图,每次你可以从图中的任意一点出发,经过若干条边后停止,然后问你最少走几次可以将图中的每条边都走过至少一次,并且要输出方案
这个转化为网络流的话,就相当于 求一个最小流,并且存在下界,即每条边至少走一次
这让我联想到很久之前的一道题,也是有向图,问走多少条路径可以将整个图中的每条边都走过,但是跟本题不同的是,那题是不允许重复走边的。
那道题目的解是这样的:...
分类:
其他好文 时间:
2014-10-22 22:03:15
阅读次数:
245