什么是超融合？“超融合”这个概念，可以简单理解为：将虚拟计算平台和存储融合到一起，将每台服务器里面自带的硬盘组成存储池，以虚拟化的形式提供数据中心所需要的计算、网络、安全以及存储等IT基础架构。在这里，也讲解一下超融合相对于传统虚拟化方案的优势。横向与纵向的扩展性顾名思义，横向扩展就是当发现存储和计算资源不够用了，按需添加服务器即可。比如，当用户的共享存储写满了，用户不得不花大价钱去购买一个新的存
分类：
其他好文 时间：
2020-03-30 17:50:51
阅读次数：
89
import tensorflow as tf ''' TensorFlow分为前端系统和后端系统 前端系统：定义程序的图和结构，即各类语言通过API接口写的程序 后端系统：运算图的结果 会话：即连接前后端的中间者，起到调度资源的效果 运行图结构 分配计算资源 掌握资源（队列，线程，变量的资源） ' ...
分类：
其他好文 时间：
2020-03-30 13:23:09
阅读次数：
95
导读 如果您认为多云应用程序已经非常灵活，请等待您真正探索混合多云所提供的优势。混合多云或简称为混合云，将云计算资源与本地基础结构结合在一起。混合云具有高度优势的原因有很多。 例如，当您要处理大量数据时，依靠混合云环境可以在性能和灵活性之间实现优质平衡。在视觉AI等特定应用中，混合云使用户可以从实时 ...
分类：
其他好文 时间：
2020-03-30 09:48:06
阅读次数：
85
用inception-v3重新训练自己的数据模型 背景： 现代的图像识别模型具有数以百万计的参数，从头开始训练（Train from scratch）需要大量的样本数据以及消耗巨大的计算资源（几百个GPU），因此采用迁移学习的方式重训一个模型（Retrain a model）对于学习模型的成本较低， ...
分类：
其他好文 时间：
2020-03-23 16:51:09
阅读次数：
82
超参数调优方法 网格搜索 通过查找搜索范围内的所有的点来确定最优值。如果采用较大的搜索范围以及较小的步长，网络搜索有很大概率找到全局最优值。然而，这种搜索方案十分消耗计算资源和时间，特别是需要调优的超参数比较多的时候，因此，在实际应用中，网格搜索法一般会使用较广的搜索范围和步长，来寻找全局最优值可能 ...
分类：
其他好文 时间：
2020-03-21 17:58:26
阅读次数：
67
kafka分区，excutor，task，RDD分区的关系： 数据的流：数据流向从kafka>sparkStreaming>RDD 1 kafka中的 topic 的 patition 分区的设置，kafka 的 partition 分区数 ，sparkStreaming 直连方式从kafka中拉数 ...
分类：
其他好文 时间：
2020-03-20 12:30:57
阅读次数：
108
首先介绍下在本文出现的几个比较重要的概念： 函数计算（Function Compute）: 函数计算是一个事件驱动的服务，通过函数计算，用户无需管理服务器等运行情况，只需编写代码并上传。函数计算准备计算资源，并以弹性伸缩的方式运行用户代码，而用户只需根据实际代码运行所消耗的资源进行付费。函数计算更多 ...
分类：
其他好文 时间：
2020-03-18 18:47:48
阅读次数：
64
介绍云计算基础设施的服务器（计算资源）虚拟化技术。
分类：
其他好文 时间：
2020-03-17 22:36:49
阅读次数：
90
YARN YARN是什么? YARN是一种新的 Hadoop 资源管理器，它是一个通用资源管理系统，可为上层应用提供统一的资源管理和调度，它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。 如果没有YARN! 无法管理集群资源分配问题。 无法合理的给程序分配合理的资源。 不方便监控 ...
分类：
其他好文 时间：
2020-03-17 13:51:21
阅读次数：
82
函数计算（FunctionCompute）：函数计算是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码。函数计算为您准备好计算资源，弹性地可靠地运行任务，并提供日志查询、性能监控和报警等功能。借助函数计算，您可以快速构建任何类型的应用和服务，并且只需为任务实际消耗的资源付费。背景通过工单和客户群里面的反馈，我们发现存在大量用户问：“函数计算如何安全的访问
分类：
数据库 时间：
2020-03-04 21:11:47
阅读次数：
85
