问题一： 在keras中使用多个GPU训练模型时，出现错误 AttributeError: '_TfDeviceCaptureOp' object has no attribute '_set_device_from_string' ， 根据错误提示是'_TfDeviceCaptureOp'对象没有 ...
分类：
其他好文 时间：
2020-02-18 14:37:31
阅读次数：
312
Sqoop 简介 Sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可 ...
分类：
Web程序 时间：
2020-02-18 12:47:15
阅读次数：
149
scala是马丁.奥德斯克设计的，专门为程序员设计，广泛应用于大数据的语言。它同时支持面向对象和面向函数编程，运行scala需基于JVM，使用它需要提前安装好JDK和scala SDK。scala的的代码一行可以顶多行java代码，开发效率高，并且兼容java类库，scala编译完也是.class文 ...
分类：
其他好文 时间：
2020-02-17 20:18:23
阅读次数：
104
起源 Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。该项目的目标是为处理实时数据提供一个统一、高吞吐、低延迟的平台。其持久化层本质上是一个“按照分布式事务日志架构的大规模发布/订阅消息队列”，这使它作为企业级基础设施来处理流式数据非常有价值。此外，Kafk ...
分类：
其他好文 时间：
2020-02-17 14:03:42
阅读次数：
83
import org.apache.spark.{SparkConf, SparkContext} import scala.util.parsing.json.JSON object JSONParse { def main(args: Array[String]): Unit = { val i ...
分类：
Web程序 时间：
2020-02-17 00:45:38
阅读次数：
120
实验5-Spark SQL编程初级实践-题目-厦门大学-林子雨-Spark编程基础（Scala版） 1．Spark SQL 基本操作将下列 JSON 格式数据复制到 Linux 系统中，并保存命名为 employee.json。 { "id":1 , "name":" Ella" , "age":3 ...
分类：
其他好文 时间：
2020-02-15 20:27:52
阅读次数：
119
实验 2 Scala 编程初级实践 1、请用脚本的方式编程计算并输出下列级数的前 n 项之和 Sn，直到 Sn 刚好大于或等于 q 为止，其中 q 为大于 0 的整数，其值通过键盘输入。 例 如 ， 若 q 的 值 为 50.0 ， 则 输 出 应 为 ： Sn=50.416695 。 请 将 源 ...
分类：
其他好文 时间：
2020-02-15 18:43:04
阅读次数：
158
目录： 一、官网下载：（各种版本） 二、百度网盘下载：（scala-2.11.8.tgz） 三、安装教程 一、从官网下载操作步骤： 1、首先进入官网下载地址：https://www.scala-lang.org/download/ 进入官网，一直向下滑，直到看到下面这个界面： 2、按上图操作后进入下 ...
分类：
其他好文 时间：
2020-02-15 09:58:11
阅读次数：
256
因为重新装了系统，导致之前虚拟机及ubuntu系统环境都没有了。因为马上要开学了，学习大数据环境一定是必备的，今天无论如何都要安装好环境。 最开始学习hadoop的时候，我就自己装过虚拟机还有阿里云esc服务器环境，但是只有云服务器安装成功了。但在具体使用过程中，发现纯命令行的界面以及云服务器的 网 ...
分类：
其他好文 时间：
2020-02-14 22:54:00
阅读次数：
75
一、大数据spark 跟进scala的知识点学习。 视频号： av64039811 二、《一线架构师实践指南》阅读 阅读了第十六章 故事：困扰已久的非功能问题 ...
分类：
其他好文 时间：
2020-02-14 22:27:43
阅读次数：
86
