1 Hadoop是什么1.hadoop是一个由Apache基金会所开发的分布式系统基础架构。2.主要解决，海量数据的储存和海量数据的分析计算问题。3.广义来说，hadoop通常是指一个更广泛的概念 Hadoop生态圈。 Hadoop三大发行版本Hadoop三大发行版本：Apache、Cloudera ...
分类：
其他好文 时间：
2020-07-26 23:10:55
阅读次数：
101
1 Hadoop是什么 1.hadoop是一个由Apache基金会所开发的分布式系统基础架构。 2.主要解决，海量数据的储存和海量数据的分析计算问题。 3.广义来说，hadoop通常是指一个更广泛的概念 Hadoop生态圈。 Hadoop三大发行版本 Hadoop三大发行版本：Apache、Clou ...
分类：
其他好文 时间：
2020-07-26 22:58:28
阅读次数：
95
这一篇介绍的来介绍一下我在工作中接触到的用户行为分析系统。在这个系统中主要负责功能开发，计算逻辑开发，日志检测告警等，数据处理，数据准清洗备也有涉及。 用户行为分析在现在这个时期已经是一个比较常见，使用很广的一个词，在互联网公司，有大数据团队的基本上都会提供这样一套分析系统，以及近年来也出现了很多专 ...
分类：
其他好文 时间：
2020-07-26 19:48:26
阅读次数：
97
4 大数据技术之Hadoop（HDFS） 第1章 HDFS概述 1.1 HDFS产出背景及定义 1.2 HDFS优缺点 1.3 HDFS组成架构 1.4 HDFS文件块大小（面试重点） 第2章 HDFS的Shell操作（开发重点） 1．基本语法 bin/hadoop fs 具体命令 OR bin/h ...
分类：
其他好文 时间：
2020-07-26 19:35:03
阅读次数：
94
概述 数据同步场景类型： 主数据库与备份数据库之间的数据备份； 主系统与子系统间的数据更新； 属于同类型不同集群数据库间的数据同步； 不同区域、不同数据库类型间的数据传输交换； 大数据系统：数据从业务系统同步进入数据仓库、数据从数据仓库同步进入数据服务或者数据应用。（本篇主讲数据从业务系统同步进入数 ...
分类：
其他好文 时间：
2020-07-26 19:27:15
阅读次数：
68
恢复内容开始 迭代器 实际就是调用next方法 使被处理对象通过__iter__在内部建立一个对应的next方法 f=open("text.txt","r+")iter_f=f.__iter__()print(iter_f.__next__(),end="")print(iter_f.__next_ ...
分类：
其他好文 时间：
2020-07-26 15:50:01
阅读次数：
58
python学习之路 你想要的都在这里了 (根据自己的学习进度后期不断更新哟！！！) 一、python基础 1.python基础--python基本知识、七大数据类型等 2.python基础--程序交互、格式化输出、流程控制、break、continue 3.python基础--小数据池，代码块的最 ...
分类：
编程语言 时间：
2020-07-26 15:35:50
阅读次数：
70
1 cd /d D:\MyWork\MySQL\mysql-5.7.28-winx64\bin rem 目的是为了执行mysql.exe 2 mysql -h127.0.0.1 -P3306 -uroot -p123456 rem 作用是为了让客户端能够正确的连接服务器 3 mysql --host ...
分类：
其他好文 时间：
2020-07-26 01:52:32
阅读次数：
140
题记： 因业务需要，需将一些用户记录进行汇总并上传到指定平台。需要先将指定时间的所有用户记录进行汇总。涉及到了大数据量的数据导入导出。 使用 iINTO OUTFILE 和 LOAD DATA LOCAL INFILE 实现了改功能，记录一下 步骤： 1 将源数据导出（select * from t ...
分类：
数据库 时间：
2020-07-25 23:53:48
阅读次数：
72
Smartb](https://www.smartbi.com.cn/)i是国内领先的BI厂商，产品定位于一站式大数据服务平台，对接各种业务数据库、数据仓库和大数据平台，进行加工处理、分析挖掘与可视化展现
分类：
其他好文 时间：
2020-07-24 23:52:11
阅读次数：
173
