Cloud computing models: With cloud deployment, nothing is installed on premise, but an Internet connection and network infrastructure solutions With h ...
分类：
其他好文 时间：
2021-04-21 12:22:48
阅读次数：
0
1、对RDD的分区重新进行划分：rdd1.coalesce(num,boolean) 1 val rdd1 = sc.parallelize(Array[String]("love1", "love2", "love3", "love4", "love5", "love6", "love7", "l ...
分类：
其他好文 时间：
2021-04-21 11:54:31
阅读次数：
0
一、词频统计： 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words flatmap() 3.全部转换为小写 lower() 4.去掉长度小于3的单词 filter() 5.去掉停用词 6.转换成键值对 map() 7.统计词频 reduceByKey() 二、学生课程分 ...
分类：
其他好文 时间：
2021-04-08 13:42:37
阅读次数：
0
操作方法 with open('文件名',mode='读写追加',encoding='编码方式'） f.close=没有用with就要写他关闭 可搂s 只读 r 读写 r+ bs类型 rb=不用写编码方式 r+b=要在写的后面加 f.write(写的内容.encode('编码方式')) f.read ...
分类：
编程语言 时间：
2021-04-07 11:29:29
阅读次数：
0
Scrapy快速入门： 安装和文档： 1、安装：通过pip install Scrapy即可安装 2、Scrapy官方文档： http://doc.scrapy.org/en/latest 3、Scrapy中文文档： http://scrapy chs.readthedocs.io/zh_CN/la ...
分类：
其他好文 时间：
2021-04-06 15:10:38
阅读次数：
0
11.3 使用Spring实现AOP 方式三：使用注解实现！ <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www ...
分类：
编程语言 时间：
2021-04-06 14:07:51
阅读次数：
0
1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words（map,flatmap） 3.全部转换为小写（lower（）） 4.去掉长度小于3的单词（filter） 6.练习一的生成单词键值对（map) ...
分类：
其他好文 时间：
2021-03-31 11:48:28
阅读次数：
0
1 import os 2 3 # 获取手机系统信息 4 phone_sys = os.popen('adb shell "cat /system/build.prop | grep "product""').read() 5 print(phone_sys) 6 7 # 获取手机设备型号 8 de ...
分类：
编程语言 时间：
2021-03-30 13:42:38
阅读次数：
0
博客迁移计划11 \(\rightarrow\) 戳我看POJ原题 Cow Relays Time Limit: 1000MS $ \quad $ Memory Limit: 65536K Description For their physical fitness program, \(N (2 ...
分类：
其他好文 时间：
2021-03-30 13:17:03
阅读次数：
0
1. 准备文本文件从文件创建RDD lines=sc.textFile()筛选出含某个单词的行 lines.filter() 2. 生成单词的列表从列表创建RDD words=sc.parallelize()筛选出长度大于2 的单词 words.filter() ...
分类：
其他好文 时间：
2021-03-30 13:05:37
阅读次数：
0
