基于锁和线程的并发模型是目前最常用的一种并发模型,但是并发编程模型不仅仅只有这一种,了解和熟悉各种并发编程模型,在解决并发问题时会有更多思路。” ...
分类:
其他好文 时间:
2019-08-27 00:39:50
阅读次数:
85
[toc] 大纲 机器环境及SSH预处理 hadoop安装部署 〇、Hadoop下载地址 采用apache官网下载地址进行下载 apache索引目录 "Index of /dist" 此处使用了 hadoop 3.1.2.tar.gz 一、分配机器环境 共3台机器 172.23.7.9 172.23 ...
分类:
其他好文 时间:
2019-08-22 23:41:15
阅读次数:
107
原文:aspnetcore 实现简单的伪静态化 aspnetcore 实现简单的伪静态化 Intro 在我的活动室预约项目中,有一个公告模块,类似于新闻发布,个人感觉像新闻这种网页基本就是发布的时候编辑一次之后就再也不会改了,最适合静态化了, 静态化之后用户请求的就是静态文件基本不再需要服务器端查询... ...
分类:
Web程序 时间:
2019-08-21 10:01:26
阅读次数:
144
原文:ASP.NET Core Web 应用程序系列(一)- 使用ASP.NET Core内置的IoC容器DI进行批量依赖注入(MVC当中应用) 在正式进入主题之前我们来看下几个概念: 一、依赖倒置 依赖倒置是编程五大原则之一,即: 1、上层模块不应该依赖于下层模块,它们共同依赖于一个抽象。 2、抽... ...
分类:
Web程序 时间:
2019-08-21 09:33:20
阅读次数:
96
Hive通过给用户提供的一系列交互接口,接收到用户的指令(SQL),使用自己的Driver,结合元数据(MetaStore),将这些指令翻译成MapReduce,提交到Hadoop中执行,最后,将执行返回的结果输出到用户交互接口 ...
分类:
其他好文 时间:
2019-08-20 11:09:39
阅读次数:
62
```
解压和重命名文件
tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz
mkdir /opt/sqoop
mv sqoop-1.4.7.bin__hadoop-2.6.0 /opt/sqoop/sqoop1.4.7
``` ```
进入sqoop的配置... ...
分类:
其他好文 时间:
2019-08-17 14:19:53
阅读次数:
63
在Mapper和Reducer之间有一个非常重要的组件Combiner。每一个map都可能会产生大量的本地输出,Combiner的作用就是对map端的输出先做一次合并,以减少在map和reduce节点之间的数据传输量,以提高网络IO性能,是MapReduce的一种优化手段之一 Combiner最基本 ...
分类:
其他好文 时间:
2019-08-16 17:10:59
阅读次数:
83
1.hadoop前世今生: 1) 搜索引擎:网络爬虫+索引服务器(生成索引+检索) 2) Doung Cutting 3) Nutch a.分布式存储 b.分布式计算 4)GFS论文 doung cutting写了hdfs 2.hadoop概述 hadoop common:提供网络通信 hadoop ...
分类:
其他好文 时间:
2019-08-16 00:34:16
阅读次数:
122
前言: 本人是即将大四学生,近期秋招开始,准备去投投看, 下面是我写的一份简历,希望大佬们帮忙看看有没有什么问题或者建议的, 或者大佬们有面经可以分享下的,这里万分感谢! 专业技能: 编程语言:Java:熟悉 / Python:掌握 / C ++: 掌握 Web框架:SSM:熟悉 / SSH:掌握 ...
分类:
其他好文 时间:
2019-08-04 15:25:21
阅读次数:
111
Grep案例 1. 创建在hadoop-2.7.2文件下面创建一个input文件夹 [atguigu@hadoop101 hadoop-2.7.2]$ mkdir input 2. 将Hadoop的xml配置文件复制到input [atguigu@hadoop101 hadoop-2.7.2]$ c ...
分类:
其他好文 时间:
2019-07-19 17:05:38
阅读次数:
111