在SOA时代，主数据解决的是企业内核心数据不统一、不一致、不准确、不完整、不共享的问题。而今天的数字化时代，赋予MDM的责任，不仅在与企业内部的数据治理和集成共享，还有一个重要的职责就是上下游产业的联通，实现社会化的主数据互联。未来主数据一定是融合了大数据技术、云计算技术、数据孪生技术、微服务技术的、人工智能技术的应用平台，主数据离不开技术却超越技术。 现在引入主数据这个概念了，在应用层面讲
分类：
其他好文 时间：
2020-09-12 21:16:37
阅读次数：
41
Flink常用算子代码实现 (Scala版本和Java版本) ...
分类：
编程语言 时间：
2020-09-11 16:15:56
阅读次数：
71
是新朋友吗？记得先点蓝字关注我哦～一、引言动漫《海贼王》中，曾经拥有世界上一切的男人，海贼王哥尔·D·罗杰，在临行前说：“想要我的财宝吗，去找吧，我把世界上的一切都放在那里了”。全世界的人们都趋之若鹜奔向大海，寻找onepiece，大海贼时代由此开启！17岁的路飞也遵循了与香克斯的约定，出海航行，立志成为海贼王。而在2012年初，世界经济论坛发布的大数据和大影响报告指出，大数据已成为黄金和货币等经
分类：
其他好文 时间：
2020-09-11 16:10:11
阅读次数：
49
一、格式 1、父类 bin/hadoop fs 命令 2、子类 bin/hdfs dfs 命令 二、命令 1、help 作用：获取帮助文档格式：hadoop fs -help 命令名称 2、ls 作用：查看HDFS路径的文件 格式： hadoop fs -ls 路径 hadoop fs -ls -R ...
分类：
系统相关 时间：
2020-09-10 23:08:31
阅读次数：
47
是新朋友吗？记得先点蓝字关注我哦～践行数据的商业价值，理解大数据的本质，从哪里开始？应该从认识不确定性开始。01什么是不确定性什么是不确定性？打个比方，老王、老李做一个游戏“猜花生米”。老王出一只拳头，让老李猜里面是空的还是抓了一粒花生米。这个事件对老王而言是确定性事件，因为老王自己有没有抓花生米，他心知肚明。这个事件对猜拳的老李来说就是不确定性事件，因为老李无法对老王的猜拳决策做出绝对准确的预测
分类：
其他好文 时间：
2020-09-10 22:46:36
阅读次数：
40
写在前面 首先我们来看看需求，以下是某博客的好友列表数据，冒号前是一个用户，冒号后是该用户的所有好友（好友关系是单向的）： A:B,C,D,F,E,O B:A,C,E,K C:F,A,D,I D:A,E,F,L E:B,C,D,M,L F:A,B,C,D,E,O,M G:A,C,D,E,F H:A, ...
分类：
其他好文 时间：
2020-09-10 22:33:47
阅读次数：
36
1.hive本身对union这样的命令进行了优化 2.hdfs数据本地化率对hive性能产生影响 在数据大小一定的情况下，500个128M的文件和2个30G的文件 跑hive任务，性能是有差异的，两者最大的区别在于，后者在读取文件时，需要跨网络传输，而前者为本地读写。数据本地化率问题。 3.不同数据 ...
分类：
其他好文 时间：
2020-09-09 19:07:41
阅读次数：
34
作者介绍@大师兄混迹数据江湖十余载。主要负责大数据商业变现和产品运营工作。好多想要入门数据分析师这个岗位的同学，不知道该如何规划自己的学习路径，我尝试把数据分析师的入门路径总结7个阶段，供大家参考。第一阶段：会用Excel做简单的数据统计分析第二阶段：会用SQL从数据库提取数据第三阶段：能够玩转商业智能BI工具第四阶段：掌握数理统计知识，擅长高级统计分析第五阶段：擅长通过编程玩转数据分析第六阶段：
分类：
其他好文 时间：
2020-09-09 19:00:04
阅读次数：
40
Python是一门非常熟悉的编程语言，面对这个大数据的时代，数据已经成为了生活之中非常重要的一部分。之前有人说过Java语言是适合数据分析的计算机编程语言之一，在这里，我想要告诉大家，其实对于Java来说，Python更适合大数据领域，也是最受欢迎的编程语言。
分类：
编程语言 时间：
2020-09-09 18:44:25
阅读次数：
85
redis五大数据类型——String Redis 是一个开源（BSD许可）的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间件。它支持多种类型的数据结构，如字符串（strings）， 散列（hashes）， 列表（lists）， 集合（sets）， 有序集合（sorted sets） ...
分类：
其他好文 时间：
2020-09-09 18:40:08
阅读次数：
32
