最近一直在纠结更新的问题。整个流程基本上搞定了。目前就在修正一些BUG和，容错处理。我们知道，在手机上，安装目录是没有写权限的，于是，我们只能把数据写到另外的地方。要想取得这个路径，使用 writablePath就可以了。那我们在纠结两个问题一、数据应该写在哪里对于IOS来说，由于没有外部存储卡一说...
分类：
其他好文 时间：
2014-07-10 12:18:01
阅读次数：
242
欢迎转载，转载请注明出处，徽沪一郎，谢谢。在流数据的处理过程中，为了保证处理结果的可信度(不能多算，也不能漏算)，需要做到对所有的输入数据有且仅有一次处理。在Spark Streaming的处理机制中，不能多算，比较容易理解。那么它又是如何作到即使数据处理结点被重启，在重启之后这些数据也会被再次处理...
分类：
其他好文 时间：
2014-07-07 14:36:48
阅读次数：
275
欢迎转载，转载请注明出处，徽沪一郎。概要本文就standalone部署方式下的容错性问题做比较细致的分析，主要回答standalone部署方式下的包含哪些主要节点，当某一类节点出现问题时，系统是如何处理的。Standalone部署的节点组成介绍Spark的资料中对于RDD这个概念涉及的比较多，但对于...
分类：
其他好文 时间：
2014-07-07 14:19:57
阅读次数：
274
这2天在开发中碰到一个奇怪的问题，在内网服务器 int类型字段 intId 在insert的时候 value（‘’） 是没有问题的但是在外网的MYSQL中 会报错 后来在网上看到一篇文章很不错.修改my.iniXML/HTML代码ctrl+f查找sql-mode将它值改为"ANSI"sql-mode...
分类：
数据库 时间：
2014-07-01 20:56:50
阅读次数：
509
HDFS文件系统讲解，主要包括：1、namenode/datanode；2、数据存储副本；3、元数据持久化；4、数据模型；5、故障容错
分类：
其他好文 时间：
2014-06-30 22:01:26
阅读次数：
231
1.小胜凭智，大胜靠德。2.有干劲，你就洒下汗水；有知识，你就献出智慧；二者都不具备，请你让出岗位。3.城市多喝一杯奶，农村致富一家人。4.财散人聚，财聚人散。5.一个产品，抓眼球，揪耳朵，都不如暖人心。6.一个人智力有问题，是次品；一个人的灵魂有问题，就是危险品。经营人心就是经营事业。7.好心态才...
分类：
其他好文 时间：
2014-06-30 11:11:37
阅读次数：
190
引言
Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。HDFS放宽了一部分POSIX约束，来实现流式读取文件...
分类：
其他好文 时间：
2014-06-28 07:48:49
阅读次数：
253
书籍学习——董西成《Hadoop技术内幕 深入解析HADOOP COMMON和HDFS架构设计与实现原理》HDFS 高容错，高伸缩性Lucene是引擎开发包，提供了一个纯java的高性能全文检索，可方便的嵌入到各种应用中实现全文搜索/索引功能。Nutch是以Lucene为基础实现的搜索引擎应用，Lu...
分类：
其他好文 时间：
2014-06-27 12:15:57
阅读次数：
221
额外域控制器：额外域控制器是指除了第一台安装的域控制器（主域控制器）意外的所有域控制器；那么额外域控制器有什么好处呢？1、可以提供容错。即一台DC出问题后，另一台仍可以可以继续工作，提供服务；2、提高用户登录效率。多台域控可以分担用户审核，加快用户登录速度；3、..
新炬数据库大师—暑期公益体验课
一、有志于从事DBA的（学生）不容错过
1. 中国最大最专业的ORACLE软件服务商：本次活动主办方上海新炬网络技术有限公司（以下简称上海新炬），是中国最大最专业的ORACLE软件服务商，负责着中国移动40%的数据库在系统服务，专注于为企业提供专业的IT运维服务、IT外包服务、云计算、大数据解决方案和自动化测试平台等。
2. 强大的专家团队与业内顶尖平台的...
分类：
数据库 时间：
2014-06-22 20:38:08
阅读次数：
324
