码迷,mamicode.com
首页 >  
搜索关键字:spark thread 优化    ( 63653个结果
Effective Java 70 Document thread safety
Every class should clearly document its thread safety properties with a carefully worded prose description or a thread safety annotation. The synchron...
分类:编程语言   时间:2014-05-05 12:00:18    阅读次数:437
LED显示屏通讯协议 2
接上篇LED显示屏通讯协议 1,这篇说明Hello()返回数据的格式。================================================================================================= 1 Thread nthread ...
分类:其他好文   时间:2014-05-04 20:39:47    阅读次数:254
优化MySQL数据库查询
在优化查询中,数据库应用(如MySQL)即意味着对工具的操作与使用。使用索引、使用EXPLAIN分析查询以及调整MySQL的内部配置可达到优化查询的目的。 任何一位数据库程序员都会有这样的体会:高通信量的数据库驱动程序中,一条糟糕的SQL查询语句可对整个应用程序的运行产生严重的影响,其不仅消耗掉更多...
分类:数据库   时间:2014-05-04 19:53:31    阅读次数:398
浅谈网站优化六步骤
1、分析关键词 这是进行SEO最重要的一环,关键词分析包括:关键词关注量分析、竞争对手分析、关键词与网站相关性分析、关键词部署、关键词排名预测。 2、网站架构分析 网站结构符合搜索引擎的蜘蛛喜好则有利于SEO。其中网站架构分析包括:剔除网站架构不友好设计、尽量使用树状目录结构、网站导航与链接优化。 2、关键词布局 SEO不仅仅只让网站首页在搜索引擎...
分类:Web程序   时间:2014-05-04 18:29:00    阅读次数:368
异步DNS解析的实现
在高性能爬虫为什么使用定制DNS客户端一文中阐述了DNS解析是网络爬虫的瓶颈。目前主要有两种方法来提高DNS解析效率:1. 基于多线程的DNS 解析2. 基于NIO的DNS解析dnsjava中使用的解析方式就是基于多线程的DNS解析class ResolveThread extends Thread...
分类:其他好文   时间:2014-05-04 11:15:14    阅读次数:300
hbase 学习(十四) Facebook针对hbase的优化方案分析
使用hbase的目的是为了海量数据的随机读写,但是在实际使用中却发现针对随机读的优化和gc是一个很大的问题,而且hbase的数据是存储在Hdfs,而Hdfs是面向流失数据访问进行设计的,就难免带来效率的下降。下面介绍一下Facebook Message系统在HBase online storage场...
分类:其他好文   时间:2014-05-04 11:08:29    阅读次数:337
定时器
public class Demo { private long time;//间隔的时间 private Runnable task;//指定的任务 private boolean flag = true; private Thread th = null;//默认为nul...
分类:其他好文   时间:2014-05-04 10:38:17    阅读次数:348
ListView的优化
1. ListView需要设置adapter,它的item是通过adapter的方法getView(int position, View convertView, ViewGroup parent)获得的。 2. ListView中只有第一屏的item需要新建,它的引用会被存在RecycleBin对象内,在拖动时后面的item实际上是重从了之前创建的item。3. 根据上述,ListView在需...
分类:其他好文   时间:2014-05-04 09:50:38    阅读次数:345
hdu-3401-Trade-单调队列优化的DP
单调队列入门题。。。 dp[i][j]:第i天,手中拥有j个股票时,获得的最大利润。 若第i天不买不卖:dp[i][j]=max(dp[i][j],dp[i-1][j]); 若第i天买            :dp[i][j]=max(dp[i][j],dp[i-w-1][k]-(j-k)*ap[i]); 若第i天卖            :dp[i][j]=max(dp[i][j],dp...
分类:其他好文   时间:2014-05-04 09:13:22    阅读次数:303
Spark中的Scheduler
Spark中的Scheduler scheduler分成两个类型,一个是TaskScheduler与其实现,一个是DAGScheduler。 TaskScheduler:主要负责各stage中传入的task的执行与调度。 DAGScheduler:主要负责对JOB中的各种依赖进行解析,根据RDD的依赖生成stage并通知TaskScheduler执行。 实例生成 TaskSchedule...
分类:其他好文   时间:2014-05-04 09:08:02    阅读次数:379
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!