Linux的用户管理 用户 权限 资源 相对于的管理 useradd 创建一个用户 useradd [用户名] passwd passwd [用户名] 下一步输入密码和确定密码 用户之间不能相互访问 groupadd 添加组,groupadd 组名 usermod 给用户添加组 usermod -a ...
分类:
系统相关 时间:
2020-07-12 22:07:37
阅读次数:
88
Linux的变量 作用域: 本地 局部 位置 特殊 环境 本地变量 当前的shell拥有 生命周期随shell name=gob [root@MDNode01 shell]# echo $$ 1091 [root@MDNode01 shell]# syy=123 [root@MDNode01 she ...
分类:
系统相关 时间:
2020-07-12 22:05:32
阅读次数:
67
IaaS、PaaS 和 SaaS:云服务模型概述 为您的组织选择合适的云服务模型,可以帮助您充分利用预算和 IT 资源。 基础设施即服务 (IaaS)、平台即服务 (PaaS) 以及软件即服务 (SaaS) 均可提供不同级别的控制和管理。了解哪种模型最适合您的需求。 基础设施即服务 (IaaS) 为 ...
分类:
其他好文 时间:
2020-07-12 16:37:05
阅读次数:
131
科技公司飞速发展和数字科技日益重要的今天,万物互联、人工智能的时代业已到来,海量数据资产被创造出来并亟待分析,从而衍生出了很多前所未有的业务需求,而大数据计算技术完美地解决了海量数据的收集、存储、计算、分析的问题。未来,更多人将学会分析数据,并将数据的洞察运用到工作和生活中的方方面面。什么是大数据大数据,IT行业术语,是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处
分类:
其他好文 时间:
2020-07-12 16:30:47
阅读次数:
87
本来打算玩 netty的 但是这个东西暂时也不用,而且我之前玩过mina就暂时不玩这个了,等以后有时间再玩,那玩啥呢?前几天和我们领导要了百度网盘会员,下了60G的大数据视屏,嘿嘿,有的玩了,今天开始第一章,大家都知道,要玩大数据,坑定要用Linux的,今天就开始玩Linux把 要玩呢,就需要安装接 ...
分类:
系统相关 时间:
2020-07-12 16:19:44
阅读次数:
73
对于海量的数据处理问题是一项艰巨而复杂的任务。原因有以下几个方面: 一、数据量过大,数据中什么情况都可能存在 如果说有10条数据,那么大不了每条去逐一检查,人为处理,如果有上百条数据,也可以考虑,如果数据上到千万级别,甚至过亿,那不是手工能解决的了,必须通过工具或者程序进行处理,尤其海量的数据中,什 ...
分类:
数据库 时间:
2020-07-12 12:12:37
阅读次数:
80
java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries. 出现这个问题的原因是我们在windows上模拟开发环境,但并没有真正的搭建hadoop和spark 解决办法: ...
1 Hadoop是什么 2 Hadoop三大发行版本 Hadoop三大发行版本:Apache、Cloudera、Hortonworks。 Apache版本最原始(最基础)的版本,对于入门学习最好。 Cloudera在大型互联网企业中用的较多。 Hortonworks文档较好。 Apache Hado ...
分类:
其他好文 时间:
2020-07-12 00:59:06
阅读次数:
92
1. 一期工程项目技术架构 1)业务驱动 2)问题驱动 2. 二期工程项目技术架构 项目优化原则: 1)优先从架构和程序进行优化 2)考虑增加集群扩容 做任务为什么不适用kafka? 1)此业务用户量还小 2)数据量小 3)使用kafka大材小用,资源浪费 为什么同时使用db和redis 1)用户成 ...
分类:
其他好文 时间:
2020-07-12 00:58:36
阅读次数:
115
最近在研究虚拟化,容器和大数据,所以从Docker入手,下面介绍一下在Windows下怎么玩转Docker。 Docker本身在Windows下有两个软件,一个就是Docker,另一个是Docker Toolbox。这里我选择的是Docker Toolbox,为什么呢?参见官方文档: 官方下载地址( ...