码迷,mamicode.com
首页 >  
搜索关键字:spark 大数据 hadoop yarn    ( 30860个结果
新基建助力数字化供应链体系的搭建
伴随着2C端消费互联网增速的显著减缓,新一代的革命则将要步入爆发期。在每次科技革命中,新的“技术—社会经济范式”对创新和投资行为将造成极大影响。1、传统化基建将向数字化基建转型传统化基建解决了物与人的连接,道路、机场的搭建,给地区提供繁荣的商业;数字化新基建则解决数据信息的连接、交互和处理。5G、云计算、大数据分析、人工智能和量子计算等新技术,做为数字化产业化和产业数字化的基础设施,将给产业升级提
分类:其他好文   时间:2020-09-17 20:14:41    阅读次数:25
运营商大数据获客应用全面解析
现在是大数据时代,掌握了数据就相当于掌握了财富,拥有数据就相当于拥有了打开金库大门的钥匙。现在除了BAT这些互联网巨头掌握了巨大的自身用户数据外,再就是运营商大数据了,中国移动,中国联通,中国电信掌握了数以亿计的用户数据,据不完全统计,三大运营商的用户总数已经超过了15亿左右,相当于中国的总人口。单论用户数据和每天产生的用户上网行为数据,通信行为数据,等等综合信令数据,运营商是大数据行业中当之无愧
分类:其他好文   时间:2020-09-17 20:13:05    阅读次数:27
大数据平台搭建包含哪些层级
大数据分析平台的搭建有利于帮助企业构建统一的数据存储和数据处理资源,围绕企业业务开展大数据应用建设,最终形成面向服务化的数据资产。而今天我们就来了解一下,常见的大数据平台都包含哪些层次?  1、数据采集层:分3个层面的采集技术进行支持,一是传统业务系统数据库和半结构化、结构化数据的采集和集成,如采用Sqoop技术进行关系数据库和Hadoop系统之间的数据抽取和交换;二是交通实时流数据的采集,包
分类:其他好文   时间:2020-09-17 19:57:01    阅读次数:24
Spark的Shuffle和MR的Shuffle异同
介绍 不论MapReduce还是RDD,shuffle都是非常重要的一环,也是影响整个程序执行效率的主要环节,但是在这两个编程模型里面shuffle却有很大的异同。 shuffle的目的是对数据进行混洗,将各个节点的同一类数据汇集到某一个节点进行计算,为了就是分布式计算的可扩展性。 可能大家多MR的 ...
分类:其他好文   时间:2020-09-17 19:31:45    阅读次数:30
2020重新出发,NOSQL,MongoDB是什么?
什么是MongoDB ? MongoDB 是一个开源的文档数据库,它基于 C++ 语言编写,性能高,可用性强,能够自动扩展。 MongoDB 是最流行的 NoSQL 数据库之一,原生支持分布式集群架构,特别适合处理大数据,阿里巴巴、腾讯、头条、Twitter、Google、Facebook 等一线互 ...
分类:数据库   时间:2020-09-17 19:21:55    阅读次数:41
Hadoop join
一、Map端的主要工作 为来自不同表或文件的key/value对,打标签以区别不同来源的记录。 然后用连接字段作为key,其余部分和新加的标志作为value,最后进行输出。 二、Reduce端的主要工作 在Reduce端以连接字段作为key的分组已经完成, 我们只需要在每一个分组当中将那些来源于不同 ...
分类:其他好文   时间:2020-09-17 19:03:58    阅读次数:23
大数据基本复习
大学的最后几门课了,DJ同学加油啊!!! (概要)第一章 信息科技需要处理的三大核心问题 第一次浪潮:信息处理 第二次浪潮:信息传输 第三次浪潮:信息爆炸 数据产生方式的变革 运营式系统阶段:数据往往伴随着一定的运营活动而产生并记录在数据库中 用户原创内容阶段:Web2.0时代的到来,而其最重要的标 ...
分类:其他好文   时间:2020-09-17 18:59:21    阅读次数:39
php-fpm由TCP端口通信改为Unit socket通信
php-fpmTCP通信改为unitsocket通信touch/var/run/php-fcgi.sockchmod777/var/run/php-fcgi.sockchownnginx./var/run/php-fcgi.sock修改www.conflisten=/var/run/php-fcgi.socklisten.owner=nginxlisten.group=nginxlisten.mo
分类:Web程序   时间:2020-09-17 18:58:30    阅读次数:43
好用的ERP运营管理系统_ERP运营管理软件选型
通常而言商贸企业的运营管理涵盖销售、生产、订单、仓储、财务等板块,不同行业的企业管理模式有所不同。在当今这个大数据时代,企业的运营管理需要离不开数据的支撑。从而如何有效协同管理资源、财务、物流等数据,就成为很重要的一环。  一款好用的ERP运营管理系统通常具备一体化管理采购申请单、店铺货物调拨、渠道销售、车间物料、集团财务等功能,并且兼具智能化与延伸性特点,比如万达宝公司的ERP运营管理系统。
分类:其他好文   时间:2020-09-17 18:54:32    阅读次数:35
新技术应用人社服务,推动“互联网+就业创业
就业是民生之本。在中共十九届四中全会精神《决定》中指出,要提高治理现代化以及治理能力水平,一定要更重视互联网、大数据和人工智能等现代信息技术手段的应用。近几年,国家社会经济发展迅猛,公共就业服务是我们国家落实积极就业政策的重要载体,同样也发展迅速。目前,在国家人社部的协同部署之下,各地也加快了信息系统“互联网+就业创业”的建设步伐,使人设局治理工作的现代化水平和能力在不断成长,社会群众都能体验到“
分类:其他好文   时间:2020-09-17 18:38:27    阅读次数:31
30860条   上一页 1 ... 61 62 63 64 65 ... 3086 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!