hadoop架构 MapReduce:分布式计算架构 HDFS:分布式文件系统 YARN:集群资源管理系统 HDFS结构: hadoop单机模式 搭建步骤: 搭建四台服务器,分别为:server、node1、node2、node3 1、关闭防火墙和selinux 2、保证server到每一个node ...
                            
                            
                                分类:
系统相关   时间:
2019-10-24 00:31:59   
                                阅读次数:
104
                             
                         
                    
                        
                            
                            
                                    一、Go语言背景和发展 1.软件开发的新挑战 多核硬件架构 超大规模分布式计算集群 Web模式导致的前所未有的开发规模和更新速度 2.Go的三位创始人 Rob Pike:Unix的早期开发者,UTF-8创始人 Ken Thompson:Unix的创始人,C语言创始人,1983年获图灵奖 Robert ...
                            
                            
                                分类:
编程语言   时间:
2019-10-20 00:48:06   
                                阅读次数:
95
                             
                         
                    
                        
                            
                            
                                    云计算:相信大家都听过云计算这个名词吧吗,但是云计算到底是什么呢?这个问题让人疑惑,云计算中的“云”就是存在互联网上的服务器集群上的资源包括硬件资源(服务器、存储器、CPU)以及软件资源(应用软件,集成开发环境),当我们需要完成我们需要的需求,我们只需要向互联网上发送一个需求,远端就会有众多计算机协 ...
                            
                            
                                分类:
其他好文   时间:
2019-10-15 19:31:37   
                                阅读次数:
109
                             
                         
                    
                        
                            
                            
                                    第三部分 硬件层 第4章 门和电路 讨论了计算机如何通过控制最底层的电流进行运算 4.1 计算机和电学 根据信号的电平区分信号的值:0~2V的电压是低电平,由二进制数字0表示,2~5V范围内的电压是高电平,由1表示。 门(gate):对电信号执行基本运算的设备,接受一个或多个输入信号,生成一个输出信 ...
                            
                            
                                分类:
其他好文   时间:
2019-10-13 18:30:46   
                                阅读次数:
84
                             
                         
                    
                        
                            
                            
                                今天小编带大家来了解了解云计算究竟是什么和对云计算的理解云计算(cloudcomputing)是分布式计算的一种,指的是通过网络“云”将巨大的数据计算处理程序分解成无数个小程序,然后,通过多部服务器组成的系统进行处理和分析这些小程序得到结果并返回给用户。云计算是以公开的标准和服务为基础,以互联网为中心,提供安全、快速、便捷的数据存储和网络计算服务,让互联网这片"云"成为每一个网
                            
                            
                                分类:
其他好文   时间:
2019-10-13 10:23:48   
                                阅读次数:
103
                             
                         
                    
                        
                            
                            
                                读一本好书,会让人有一种神清气爽的感觉。互联网相关技术虽然发展飞速,但是有些知识高度抽象,历久弥新,已成经典。有些书适合精读,有些书适合泛读,下面会列一些我读过,觉得还不错的书跟大家分享,其中不乏经典,部分书籍翻阅不下10遍(如算法导论)。书中的内容不见得工作中都会用到,但是能开阔视野,打开思路。面... ...
                            
                            
                                分类:
其他好文   时间:
2019-10-12 01:18:38   
                                阅读次数:
90
                             
                         
                    
                        
                            
                            
                                    hive与hbase的联系与区别:共同点:1.hbase与hive都是架构在hadoop之上的。都是用hadoop作为底层存储。 他们的底层是要通过mapreduce分布式计算的,hbase、hive、pig底层都是这样的。但整体来说hadoop还是比较快的,因为它是进行海量数据存储和分布式计算,这 ...
                            
                            
                                分类:
其他好文   时间:
2019-10-10 22:26:21   
                                阅读次数:
132
                             
                         
                    
                        
                            
                            
                                    PS:实操部分就省略了哈,准备最近好好看下理论这块,其实我是比较懒得哈!!! <?>MapReduce的概述 MapReduce是一种计算模型,进行大数据量的离线计算。MapReduce实现了Map和Reduce两个功能:其中Map是滴数据集上的独立元素进行指定的操作,生成键——值对形式中间结果。其 ...
                            
                            
                                分类:
其他好文   时间:
2019-10-07 00:50:10   
                                阅读次数:
157
                             
                         
                    
                        
                            
                            
                                原文地址kafka初识1.Kafka使用背景在我们大量使用分布式数据库,分布式计算集群的时候,是否会遇到这样的一些问题我们想分析下用户行为(pageviews),以便我们设计出更好的广告位我想对用户的搜索关键词进行统计,分析出当前的流行趋势有些数据,存储数据库浪费,直接存储硬盘效率又低这些场景都有一... ...
                            
                            
                                分类:
其他好文   时间:
2019-09-28 10:36:44   
                                阅读次数:
94
                             
                         
                    
                        
                            
                            
                                    摘要:VMware虚拟机安装Win10,Win10用虚拟机安装教程 微软发布Win10预览版下载地址后,用WMware虚拟机安装Win10是很好的选择。如何用VMware虚拟机安装Win10,Win10怎么用虚拟机安装? 工具/材料 VMware虚拟机 Win10 VMware虚拟机安装Win10, ...
                            
                            
                                分类:
其他好文   时间:
2019-09-22 01:27:45   
                                阅读次数:
120