摘抄自:https://www.cnblogs.com/qingyunzong/p/8946637.html 前言 在大数据计算领域,Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型 ...
分类:
其他好文 时间:
2019-03-03 16:23:20
阅读次数:
168
行云管家堡垒机 导入腾讯云主机 如何实现了对多家云厂商多种云计算资源的集中管理,从成本、监控、备份、安全等多个维度提供统一运维管控? 工具/原料 "行云管家堡垒机" 方法/步骤 1. Step1:注册登录 登录行云管家,支持QQ、微信、微博、Google等第三方账号 2. Step2:创建团队 基于 ...
分类:
其他好文 时间:
2019-02-28 18:14:20
阅读次数:
201
<!-- flowchart 箭头图标 勿删 --> 摘要:本文主要对tf的一些常用概念与方法进行描述。 tf函数 TensorFlow 将图形定义转换成分布式执行的操作, 以充分利用可用的计算资源(如 CPU 或 GPU。一般你不需要显式指定使用 CPU 还是 GPU, TensorFlow 能自 ...
分类:
其他好文 时间:
2019-02-15 22:35:20
阅读次数:
230
虚拟化云计算的一个核心思想就是在服务器端提供集中的计算资源。这些计算资源可以被分解成更小的单位去独立服务于不同的用户,也就是在共享物理资源的同时,为每个用户提供隔离,安全,可信的虚拟工作环境,而这一切不可避免的要依赖于虚拟化技术。这种硬件抽象层的虚拟化又被称为系统虚拟化,是指将一台物理计算系统虚拟化为一台或多台虚拟计算机主机。每个虚拟计算机系统(简称虚拟机)都拥有自己的虚拟硬件,如内存,CPU,网
分类:
其他好文 时间:
2019-02-09 20:50:06
阅读次数:
255
1 引言 分布式计算是指各种不同的工作站通过网络互相连接,由分布式系统提供跨越网络透明地访问各种异构设备所需要的支持,使得用户可以充分利用网络上的各种计算资源来完成自己的任务[1]。与网络技术的发展和日益增长的应用需求相适应,分布式计算已经成为新一代计算和应用的主流。分布式计算中所涉及的分布式系统是 ...
分类:
其他好文 时间:
2019-02-04 19:45:19
阅读次数:
203
BERT预训练模型在诸多NLP任务中都取得最优的结果。在处理文本分类问题时,即可以直接用BERT模型作为文本分类的模型,也可以将BERT模型的最后层输出的结果作为word embedding导入到我们定制的文本分类模型中(如text-CNN等)。总之现在只要你的计算资源能满足,一般问题都可以用BER ...
分类:
其他好文 时间:
2019-01-31 18:19:05
阅读次数:
927
Linux的原子操作与同步机制 并发问题 现代操作系统支持多任务的并发,并发在提高计算资源利用率的同时也带来了资源竞争的问题。例如C语言语句“count++;”在未经编译器优化时生成的汇编代码为。 当操作系统内存在多个进程同时执行这段代码时,就可能带来并发问题。 假设count变量初始值为0。进程1 ...
分类:
系统相关 时间:
2019-01-31 13:25:22
阅读次数:
232
在网络安全系列的前几篇文章中,我们讨论了高级持续威胁和数据泄露,强调了当今时代数据安全的重要性。本系列的最后一篇文章中,我们将讨论加密***,一种可能严重影响网络完整性的***,以及如何通过事件关联来对抗它。公司的数据并不是它为寻找发薪日的***提供的唯一有价值的东西。世界各地的组织网络都有一些***可以控制的基本网络:纯粹的计算能力。加密***,未经授权使用计算资源来挖掘加密货币,利用了这种能力。虽然这种
分类:
其他好文 时间:
2019-01-28 16:06:35
阅读次数:
179
<!-- flowchart 箭头图标 勿删 --> WebSocket是HTML5最重要的特性,让网页真正支持双工通信 它淘汰了Ajax的长轮询机制,以更节约计算资源和带宽(Http报头很小)的方式通信(长轮询机制只是模拟的双工通信,不是真正的服务器推的方式) WebSocket在未来一定会全面取 ...
分类:
Web程序 时间:
2019-01-23 21:35:55
阅读次数:
204
阿里云大计算服务MaxCompute是一款商业化的大数据分析平台,其计算资源有预付费和后付费两种计费方式。并且产品每天按照project为维度进行计量计费(账单基本情况下会第二天6点前产出)。本文使用的为云上客户真实数据,故在下文中的截图都mask掉了。
分类:
其他好文 时间:
2019-01-23 17:21:38
阅读次数:
219