前言从系统架构来看，目前的商用服务器大体可以分为三类，即对称多处理器结构(SMP：Symmetric Multi-Processor)，非一致存储访问结构(NUMA：Non-Uniform Memory Access)，以及海量并行处理结构(MPP：Massive Parallel Processi... ...
分类：
其他好文 时间：
2020-06-25 21:37:18
阅读次数：
95
BERT是一种预训练语言表示的方法，在大量文本语料（维基百科）上训练了一个通用的“语言理解”模型，然后用这个模型去执行想做的NLP任务。BERT比之前的方法表现更出色，因为它是第一个用在预训练NLP上的无监督的、深度双向系统。
无监督意味着BERT只需要用纯文本语料来训练，这点非常重要，因为海量的... ...
分类：
其他好文 时间：
2020-06-24 21:27:31
阅读次数：
58
空气的质量和人民生活健康息息相关。目前，空气污染源影响空气质量的最主要因素之一是来自固定和流动污染源的人为污染物排放，包括车辆、船舶、飞机的尾气、工业污染、居民生活和取暖、垃圾焚烧等。 随着生活水平的提高，全社会环保意识的提高，人们对生活环境健康越来越关注。国家也在PM2.5/PM10及其他污染气体监测，分析，治理上加大力度。其他污染气体包括二氧化氮、二氧化硫、一氧化碳等。 系统组成 基
分类：
其他好文 时间：
2020-06-23 18:52:09
阅读次数：
123
深度剖析了各个基础技术的源码(ZooKeeper、Hive、Spark、Flink、Hadoop等)，对这些基础技术知识动态的排列组合，形成大数据全局架构观，并深入讲述大数据全局架构设计的方方面面，打造真正满足企业万亿级海量数据规模的数据中台，真正赋能前台业务。同时，在企业万亿级真实项目落地环节，采用高性能、高可用、高扩展的架构设计原则，技术上更是融合了企业级主流的离线架构和实时架构，带领大家构建
分类：
其他好文 时间：
2020-06-23 18:39:30
阅读次数：
58
很多懂IT的游戏玩家都会将CDN和游戏加速器混淆，实际上从效果上看，CDN和网游加速器都具备让网络访问变快的能力，可以帮助玩家游戏的体验和访问效率提升，但是在它们在原理上是有本质区别的。CDN对游戏的作用？我们先看游戏场景本身的业务形态，随着网络技术演进和游戏体验的推陈出新，其实更多的是带给网络环境的压力。游戏网站中存在海量的高清图片与视频素材、动态页面数据的实时更新变化、集中推广期引发的网站突发
分类：
其他好文 时间：
2020-06-23 10:33:37
阅读次数：
71
实验包括：1.使用EMR创建Hadoop集群2.定义schema，创建示例表。3.通过HiveQL分析数据，并将分析结果保存到S3上4.下载已经分析结果数据。Task1：创建一个S3桶创建一个存储桶比如hadoop202006…Task2：创建EMR集群这里我解释一下Hadoop集群中的一些组件，了解大数据的同学直接忽略就好。ApacheHadoop：在分布式服务器集群上存储海量数据并运行分布式分
分类：
其他好文 时间：
2020-06-22 09:17:08
阅读次数：
174
Hadoop 分布式系统基础结构 海量数据存储，海量数据计算 Hadoop指的是Hadoop生态圈 Google=》Hadoop GFS->HDFS Map-Reduce->MR BigTable->HBase Hadoop发行版本 Apache：最基础 Cloudera：大型互联网企业 Horto ...
分类：
其他好文 时间：
2020-06-21 23:10:42
阅读次数：
63
很多企业为了保护数据不被泄露，都会把内部的网络通过各种方式划分成不同的网段，比如研发部门的IP网段是192.168.1.0，而办公部门的IP可以是192.168.2.0，就这样，网段不同了，数据就不会连通的！那么，如何让两组网段不同的计算机实现数据交换呢？ 有些企业可能会架设一个FTP服务器或网络共 ...
分类：
其他好文 时间：
2020-06-18 11:10:23
阅读次数：
64
随着互联网和云计算的发展及企业业务创新的需要，企业的IT资产越来越多，参与运维的岗位也越来越多样，当IT资产和运维团队达到一定规模时，对IT资产的日常管理和运维过程都会变得复杂且混乱。由此，海量资产的运维成为了企业急需解决的问题。本文将通过一个具体的实例，介绍面对海量资产运维的行云管家应对之道。一、案例介绍：某知名银行的金融科技公司，下设架构部、基础运维组以及100多个FT项目组，架构部与基础运维
分类：
其他好文 时间：
2020-06-17 01:38:15
阅读次数：
140
经验丰富的程序员大佬们，请不要对初学者说这些话……
分类：
其他好文 时间：
2020-06-13 10:26:26
阅读次数：
69
