准备工作： 1、Kubernetes版本： 1.15.x ≤ K8s version ≤ 1.17.x 2、Helm版本： 2.10.0 ≤ Helm Version ＜ 3.0.0（不支持 helm 2.16.0 #6894） 3、集群已有默认的StorageClass 如何安装 helm2，上一 ...
分类：
Web程序 时间：
2020-06-27 09:50:21
阅读次数：
188
这是我在给公司打工时候做的工作，现在这部分已经完成的差不多了，所以特别的在自己的博客上记录一下，给自己看，也是给有缘人看，说不定会给你灵感。 需求 给公司设计一个工具，它的输入是pdf文档，其中的内容是图片格式的许多法律条文。程序会读取所有的pdf文档，使用OpenCV对图片进行切割，使用pytes ...
分类：
Web程序 时间：
2020-06-27 09:40:08
阅读次数：
61
一、RDD简介 RDD 全称为 Resilient Distributed Datasets，是 Spark 最基本的数据抽象，它是只读的、分区记录的集合，支持并行操作，可以由外部数据集或其他 RDD 转换而来，它具有以下特性： 一个 RDD 由一个或者多个分区（Partitions）组成。对于 R ...
分类：
其他好文 时间：
2020-06-25 21:27:05
阅读次数：
66
创建共享库代码项目 1.共享库项目必须按照特定的代码组织结构/src/ /vars jenkins配置全局设置 1.共享库名称设置 这里的Name的值在jenkinsfile文件中会需要用到 2.配置jenkinsfile的代码仓库访问信息 创建jenkins流水线任务 项目实例 1.devops/ ...
分类：
其他好文 时间：
2020-06-25 19:44:37
阅读次数：
99
复习用，自整理——海底淤泥 1尝试比较CISC体系结构 和RISC体系结构的特点。ARM为何采用RISC体系结构？ CISC：增加指令集的复杂度，以芯片面积为代价 RISC：只执行最常用的指令，大部分复杂指令由简单指令合成 因为： 组织结构： 1RISC的硬连线的指令编码逻辑 2便于流水线执行 3大 ...
分类：
其他好文 时间：
2020-06-25 13:48:12
阅读次数：
355
1、MIPS指令概述 MIPS（(Microprocessor without Intellocked Pipleline Stages） MIPS属于精简指令集计算机RISC MIPS指令集有以下特点： 简单的Load/Store结构 易于流水线CPU设计 易于 编译器开发 MIPS指令的寻址方式 ...
分类：
其他好文 时间：
2020-06-22 22:54:42
阅读次数：
125
CDH6.3.2集成flink的部署配置标签（空格分隔）：大数据平台构建一：flink的简介二：cdh6.3.2集成flink一：flink的简介ApacheFlink是由Apache软件基金会开发的开源流处理框架，其核心是用Java和Scala编写的分布式流数据流引擎。Flink以数据并行和流水线方式执行任意流数据程序，Flink的流水线运行时系统可以执行批处理和流处理程序。此外，Flink的运
分类：
其他好文 时间：
2020-06-22 09:30:23
阅读次数：
415
慢过程多任务 定义 TED的一个很有意思的演讲，我觉得很受启发。大概意思就是，我们要进行多个方面的任务切换，不能够总是专注于一个领域。可能类似于流水线，但同时强调慢过程，一点点打磨，这反而是一件非常高效的事情。 优势与不足 首先，关注不同的领域，可以让你在一件事遇到困难时，切换到另外一个工作状态，从 ...
分类：
其他好文 时间：
2020-06-21 12:17:00
阅读次数：
345
大规模管理机器学习项目的复杂性不言而喻，在之前的文章中我们已经详细介绍了如何使用Rancher安装Kubeflow。本篇文章将一步一步教你如何构建机器学习流水线，帮助你减轻机器学习项目管理的复杂性。
分类：
其他好文 时间：
2020-06-20 11:27:06
阅读次数：
40
在此前的文章中，我已经向你介绍了Kubeflow，这是一个为团队设置的机器学习平台，需要构建机器学习流水线。 在本文中，我们将了解如何采用现有的机器学习详细并将其变成Kubeflow的机器学习流水线，进而可以部署在Kubernetes上。在进行本次练习的时候，请考虑你该如何将现有的机器学习项目转换到 ...
分类：
其他好文 时间：
2020-06-19 19:15:04
阅读次数：
44
