? Go 语言被设计成一门应用于搭载 Web 服务器，存储集群或类似用途的巨型中央服务器的系统编程语言。 对于高性能分布式系统领域而言，Go 语言无疑比大多数其它语言有着更高的开发效率。它提供了海量并行的支持，这对于游戏服务端的开发而言是再好不过了。 Go 语言教程 Go 语言环境安装 Go 语言结 ...
分类：
编程语言 时间：
2020-01-28 12:25:51
阅读次数：
77
上篇我们介绍了如何从零开始搭建一套语音聊天室后台，设计方案比较基础，本篇我们将介绍语音聊天室的升级版本——在海量用户同时在线的情况下，语音服务器的架构将如何升级改造。 互联网产品后台开发信奉一句话：先扛住再优化。工程师当然是希望把系统设计得尽善尽美，但是业务发展往往是不允许的，因此后台工程师的工作就 ...
分类：
其他好文 时间：
2020-01-27 19:02:18
阅读次数：
83
一. Hive基础概念 1.什么是Hive Hive：由 Facebook 开源用于解决海量结构化日志的数据统计。 Hive 是基于 Hadoop 的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类 SQL 查询功能。 本质是：将 HQL 转化成 MapReduce 程序。 1）Hiv ...
分类：
其他好文 时间：
2020-01-26 11:46:27
阅读次数：
96
[toc] 1. 正文 1.1. 任务划分 使用高通量计算第一步就是要针对密集运算任务做任务划分。将一个海量的、耗时的、耗资源的任务划分成合适粒度的小任务，需要综合考虑资源、数据等多方面因素。HTCondor并不参与这方面的工作，任务划分需要用户自己实现。 默认情况下，HTCondor会把一个CPU ...
分类：
其他好文 时间：
2020-01-24 20:10:36
阅读次数：
115
https://www.i4.cn/ 具有独创的云智能一键刷机和一键越狱功能简单易用的备份恢复，数据迁移等高级工具免帐号，免越狱高速安装海量的应用和游戏铃声壁纸彩铃等海量个性化资源任你使用 ...
分类：
移动开发 时间：
2020-01-24 15:50:44
阅读次数：
121
flume 1.1 Flume定义 Flume是Cloudera提供的一个高可用的，高可靠的，分布式的 海量日志采集、聚合和传输的系统 。Flume基于流式架构，灵活简单。 大数据框架大致分为3类： 数据的采集和传输：flume 数据的存储：HDFS 数据的计算：MapReduce 1.2 应用场景 ...
分类：
Web程序 时间：
2020-01-23 12:37:38
阅读次数：
103
还是这一张图，我们前几天见过了，人工智能包括机器学习，机器学习包括深度学习，那究竟什么是深度学习呢？我们先看一张图： 图中在以 x 轴和 y 轴组成的坐标系中，有一些点，可以看到，其中有一些是白点，有一些是黑点，这些点可以用（x，y）这样的坐标表示，我们现在要做的任务就是根据 x 和 y 这些点的坐 ...
分类：
其他好文 时间：
2020-01-21 18:18:31
阅读次数：
78
题目描述 信息社会，有海量的数据需要分析处理，比如公安局分析身份证号码、 QQ 用户、手机号码、银行帐号等信息及活动记录。 采集输入大数据和分类规则，通过大数据分类处理程序，将大数据分类输出。 输入描述: 一组输入整数序列I和一组规则整数序列R，I和R序列的第一个整数为序列的个数（个数不包含第一个整 ...
分类：
编程语言 时间：
2020-01-17 17:30:27
阅读次数：
234
“过去几年，大数据产业更多关注的是如何处理海量、多源和异构的数据，但我们必须承认这些只是冰山一角。目前，结构化数据仅占到全部数据量的20%，其余80%都是以文件形式存在的非结构化和半结构化数据。伴随非结构化数据呈现爆发之势，对象存储市场近两年保持强劲增长，IDC预计，软件定义存储（SDS）市场未来五年复合增长率将达到28.8%。”传统IT架构渐成“过去式”非结构化数据倒逼存储变革今天，许多企业已经
分类：
其他好文 时间：
2020-01-17 15:05:49
阅读次数：
97
1.MapReduce是什么 Hadoop MapReduce是一个软件框架，基于该框架能够容易地编写应用程序，这些应用程序能够运行在由上千个商用机器组成的大集群上，并以一种可靠的，具有容错能力的方式并行地处理上TB级别的海量数据集。这个定义里面有着这些关键词， 一是软件框架，二是并行处理，三是可靠 ...
分类：
其他好文 时间：
2020-01-17 13:43:04
阅读次数：
78
