先附上原题： HDU#4607. Park Visit 题目描述 Claire and her little friend, ykwd, are travelling in Shevchenko's Park! The park is beautiful - but large, indeed. N ...
分类：
其他好文 时间：
2017-10-09 18:31:01
阅读次数：
196
周末在公园玩，第一次看到有人在玩无人机。 当时，初步估算了一下价格。由于使用了类似ipad的操控屏幕，按照5000元估算，螺旋桨、机翼、发动机等部分按照5000元估算，充电器、外出旅行箱、拉杆小车等辅助配件按照5000元估算。 保守估计一套需要15000元。 回来查了一下，小米、大疆都有无人机。类似 ...
分类：
其他好文 时间：
2017-10-09 11:26:41
阅读次数：
186
[Spark][Python][RDD][DataFrame]从 RDD 构造 DataFrame 例子 from pyspark.sql.types import * schema = StructType( [ StructField("age",IntegerType(),True), Str ...
分类：
编程语言 时间：
2017-10-07 23:33:06
阅读次数：
177
[Spark][Python][DataFrame][RDD]从DataFrame得到RDD的例子 $ hdfs dfs -cat people.json $pyspark sqlContext = HiveContext(sc) peopleDF = sqlContext.read.json("p ...
分类：
编程语言 时间：
2017-10-07 17:31:36
阅读次数：
191
shuffle磁盘IO时间长 设置spark.local.dir为多个磁盘，并设置磁盘的IO速度快的磁盘，通过增加IO来优化shuffle性能 map|reduce数量大，造成shuffle小文件数目多 spark.shuffle.consolidateFiles为true，来合并shuffle中间 ...
分类：
其他好文 时间：
2017-10-06 10:38:25
阅读次数：
216
PageRank 程序： file contents: page1 page3page2 page1page4 page1page3 page1page4 page2page3 page4 def computeContribs(neighbors,rank): for neighbor in ne ...
分类：
编程语言 时间：
2017-09-30 15:01:58
阅读次数：
181
[Spark][Python]sortByKey 例子的继续 RDD的collect() 作用是什么？ “[Spark][Python]sortByKey 例子”的继续 In [20]: mydata004.collect() Out[20]: [[u'00001', u'sku933'], [u' ...
分类：
编程语言 时间：
2017-09-29 23:00:23
阅读次数：
322
一 broker启动后ReplicaFetcherThread OOM 版本：0.8.2.2 错误现象，server启动日志： WARN [ReplicaFetcherThread-1-21], Error in fetch Name: FetchRequest; Version: 0; Corre ...
分类：
其他好文 时间：
2017-09-27 11:31:40
阅读次数：
563
relational database every relation has a schema defining fields in columns a set of relations relation: a table with rows and columns schema: name of ...
分类：
数据库 时间：
2017-09-27 10:16:24
阅读次数：
223
1.读入待分析的字符串 2.分解提取单词 3.计数字典 4.排除语法型词汇 5.排序 6.输出TOP(20) ...
分类：
其他好文 时间：
2017-09-26 21:08:20
阅读次数：
113
