HDFS概述 HDFS（Hadoop Distributed File System）是 Apache Hadoop 项目的一个子项目. Hadoop 非常 适于存储大型数据 (比如 TB 和 PB), 其就是使用 HDFS 作为存储系统. HDFS 使用多台计算机存 储文件, 并且提供统一的访问接 ...
分类：
其他好文 时间：
2020-09-08 20:40:45
阅读次数：
34
一.环境介绍1.centos7.6vmware虚拟机主节点190.168.3.250slave190.168.3.251slave190.168.3.2522.每个节点配置好hosts解析3.下载好软件https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.htmlhadoop-3.
分类：
其他好文 时间：
2020-09-07 19:16:59
阅读次数：
68
来自专辑工具推荐古时的风筝第74篇原创文章风筝我作为一个野路子开发者，直到遇见下面的这几个工具库，才知道之前重复造了不少轮子，而且轮子还不一定有人家的圆。相信跟我一样，没事儿造轮子的人还不在少数，有些人就是对造轮子感兴趣，这个咱也无话可说，但是，比如我，我是造轮子之前不知道这世上已经有好用的轮子了，害，无知限制了我的想象力。比如我们在拿到一个List集合之后，要对这个集合进行判空操作，以前我一直是
分类：
其他好文 时间：
2020-09-07 18:52:59
阅读次数：
46
解耦Java模块的设计策略点击左上角蓝字，关注“锅外的大佬”专注分享国外最新技术内容1.概述Java平台模块系统（JavaPlatformModuleSystem，JPMS）提供了更强的封装、更可靠且更好的关注点分离。但所有的这些方便的功能都需要付出代价。由于模块化的应用程序建立在依赖其他正常工作的模块的模块网上，因此在许多情况下，模块彼此紧密耦合。这可能会导致我们认为模块化和松耦合是在同一系统中
分类：
编程语言 时间：
2020-09-07 18:46:41
阅读次数：
36
禁止域用户更改IP 1.在域控制服务器上 win+R打开运行，输入gepdit.msc，打开本地组策略编辑器， 打开用户配置->管理模版->网络—>网络连接 2.找到设置 “禁止访问lan连接组件的属性”和“为管理员启用windows2000网络连接设置”，设置为启用 3.win+r打开运行，输入g ...
前序 最近在研究反爬虫策略，写了一个大众点评评论采集的程序，途中遇到了一些坑有感而发分享给大家，大众点评是基于css机制实现的字体加密技术来阻碍我的进行准确数据的抓取 正文 图1 根据图1我们可以看出部分文字在源码中是无法得到正常显示的，对应的我们解析也只能得到一些无用的svg标签,且又由于文字本身 ...
分类：
编程语言 时间：
2020-09-04 17:42:55
阅读次数：
70
1.前言Java开发中我们经常要获取文件的路径，比如读取配置文件等等。今天我们就关于文件的路径和如何读取文件简单地探讨一下。2.文件的路径文件的路径通常有相对路径与绝对路径。2.1相对路径以当前文件为基准进行一级级目录指向被引用的资源文件。在Java代码中以当前运行的代码所在的位置为参照位置，只要被引用的文件相对于引用的文件的位置不变就可以被读取到。一旦改变相对位置就无法被读取到。2.2绝对路径文
分类：
编程语言 时间：
2020-09-04 17:17:06
阅读次数：
56
头疼，管理维护公司服务器或客户端电脑时又不记得本地管理员密码了！请看这里：微软原生免费好用的集中统一管理公司N多台服务器和客户端电脑的本地管理员密码解决方案！
分类：
其他好文 时间：
2020-09-03 17:10:54
阅读次数：
66
1 Sqoop概述 传统的应用程序管理系统，即应用程序与使用RDBMS的关系数据库的交互，是产生大数据的来源之一。由RDBMS生成的这种大数据存储在关系数据库结构中的关系数据库服务器中。 当大数据存储和Hadoop生态系统的MapReduce，Hive，HBase，Cassandra，Pig等分析器 ...
分类：
其他好文 时间：
2020-09-03 16:44:55
阅读次数：
40
Block是文件块，HDFS中是以Block为单位进行文件的管理的，一个文件可能有多个块，每个块默认是3个副本，这些块分别存储在不同机器上。块与文件之前的映射关系会定时上报Namenode。HDFS中一个块的默认大小是64M，其大小由参数dfs.block.size控制。这里面先引申几个问题出来： ...
分类：
其他好文 时间：
2020-09-03 16:43:21
阅读次数：
40
