目录RDD概述RDD实现RDD运行流程RDD分区RDD操作分类RDD编程接口说明一、RDD概述RDD:是Resilient distributed datasets的简称,中文为弹性分布式数据集;是Spark最核心的模块和类DAG:Spark将计算转换为一个有向无环图(DAG)的任务集合,通过为RD... ...
分类:
其他好文 时间:
2020-01-08 14:43:26
阅读次数:
102
from sklearn.datasets import make_blobs, load_iris import matplotlib.pyplot as plt # 支持中文 plt.rcParams['font.sans-serif'] = ['SimHei'] # 用来正常显示中文标签 pl... ...
分类:
其他好文 时间:
2020-01-07 00:48:06
阅读次数:
96
import tensorflow as tf from tensorflow import keras from tensorflow.keras import datasets import os # do not print irrelevant information # os.enviro... ...
分类:
其他好文 时间:
2020-01-02 22:23:24
阅读次数:
111
import tensorflow as tf from tensorflow import keras # train: 60k | test: 10k (x, y), (x_test, y_test) = keras.datasets.mnist.load_data() x.shape y.sh... ...
分类:
其他好文 时间:
2020-01-02 22:17:18
阅读次数:
86
深度残差收缩网络是一种新颖的深度学习算法,实际上是深度残差网络的升级版本,能够在一定程度上提高深度学习方法在含噪数据上的特征学习效果。 首先,简单回顾一下深度残差网络,深度残差网络的基本模块如下图所示。相较于普通的卷积神经网络,深度残差网络引入了跨层的恒等映射,来减小模型训练的难度,提高准确率。 然 ...
分类:
其他好文 时间:
2019-12-28 22:54:46
阅读次数:
138
1 import tensorflow as tf 2 from tensorflow.keras import datasets, layers, optimizers, Sequential, metrics 3 from tensorflow import keras 4 import os ...
分类:
其他好文 时间:
2019-12-23 22:22:08
阅读次数:
106
torchvision https://pytorch.org/docs/stable/torchvision/index.html#module-torchvision The torchvision package consists of popular datasets(数据集), model ...
分类:
其他好文 时间:
2019-12-16 12:57:21
阅读次数:
899
OGB: Open Graph Benchmark https://ogb.stanford.edu/ https://github.com/snap-stanford/ogb OGB is a collection of benchmark datasets, data-loaders and e ...
分类:
系统相关 时间:
2019-12-15 18:11:42
阅读次数:
282
机器学习:波士顿房价数据集 波士顿房价数据集(Boston House Price Dataset)(下载地址:http://t.cn/RfHTAgY) 使用sklearn.datasets.load_boston即可加载相关数据。 from sklearn.datasets import load ...
分类:
其他好文 时间:
2019-12-15 16:40:53
阅读次数:
515