原文链接： https://data-flair.training/blogs/data-locality-in-hadoop-mapreduce/ 1、什么是数据本地化 数据本地化（Data locality）是指将计算移动到数据所在的节点，而不是移动数据移动到计算所在的节点。在Hadoop中，一 ...
分类：
其他好文 时间：
2021-06-18 19:09:26
阅读次数：
0
在大数据智慧时代背景下，爬虫技术的需求愈发增多。而在最近，淘宝网的大量用户数据就遭到了泄露。6月3日，商丘市睢阳区人民法院在裁判文书网，公开了一份刑事判决书，显示两名犯罪分子在淘宝爬取并盗走大量数据。 经过检方核实，被盗取的淘宝用户数据近 12 亿条。淘宝去年 8 月 14 日报警，有黑产人员通过接 ...
分类：
其他好文 时间：
2021-06-17 17:19:00
阅读次数：
0
https://blog.csdn.net/QYmufeng/article/details/79580582 我的环境： 系统平台：Ubuntu14.04TLS（64位） Hadoop环境：Hadoop2.8.3 Eclipse：Neon.2 Release(4.6.2) Eclipse插件：ha ...
分类：
系统相关 时间：
2021-06-17 17:05:08
阅读次数：
0
1.卸载旧的docker，可选，如果搭建K8S平台，CentOS自带的docker会报错，因此最好使用官方最新的docker版本。 sudo yum remove docker \ docker-client \ docker-client-latest \ docker-common \ dock ...
分类：
其他好文 时间：
2021-06-17 17:04:55
阅读次数：
0
简介： 本文将会讲述共享充电宝开创企业来电科技如何基于 Flink + Hologres 构建统一数据服务加速的实时数仓 作者：陈健新，来电科技数据仓库开发工程师，目前专注于负责来电科技大数据平台离线和实时架构的整合。 深圳来电科技有限公司（以下简称 “来电科技”）是共享充电宝行业开创企业，主要业务 ...
分类：
其他好文 时间：
2021-06-17 17:00:49
阅读次数：
0
一、安装（基于docker-compose） 使用docker安装Nginx非常简单，只需要准备如下YML文件即可： version: "3" services: nginx12: restart: always image: daocloud.io/library/nginx:1.12.0 con ...
分类：
其他好文 时间：
2021-06-17 16:49:40
阅读次数：
0
文章目录： 目标镜像 GolangAlpine 端口映射 占用本地端口 8081 备注 Dockerfile 文章使用到的软件： Mac 12.0 Beta（macOS Monterey），处理器为：M1Portainer.io：2.5.1Docker：20.10.6 目标 快速部署 Golang ...
分类：
其他好文 时间：
2021-06-17 16:45:18
阅读次数：
0
spark程序初始化HiveContext报错：空指针异常 版本说明： spark: 1.6.1 scala: 2.10.8 hive: 1.2.1 报错信息 java.lang.RuntimeException: java.lang.NullPointerException at org.apac ...
分类：
其他好文 时间：
2021-06-17 16:37:17
阅读次数：
0
本随笔结合Docker备忘一下ASP.NET Core项目如何配置分布式Redis缓存 首先Docker中拉取Redis:latest版本镜像； docker pull redis:latest 用拉去的最新镜像创建容器，配置端口映射（默认配置6379） docker run -itd --name ...
分类：
Web程序 时间：
2021-06-16 18:23:10
阅读次数：
0
先看看官方安装文档：https://docs.docker.com/engine/install/centos/#prerequisites，得知官方建议Centos7及以上的版本； 其他说明也非常详细，安装方法也推荐了好几种；我这里再整理一下以供学习。 Docker安装： 1、安装依赖包： sud ...
分类：
其他好文 时间：
2021-06-16 17:57:54
阅读次数：
0
