码迷,mamicode.com
首页 >  
搜索关键字:hadoop 大数据 云计算    ( 28457个结果
报表连 MongoDB,数据量大报表慢,怎么做分页?
MongoDB 没有关系数据库之类的分页机制,要实现分页查询得硬编码,可以通过实现 Pageable 接口来自定义分页类,具体网上有很多介绍。 硬编码的缺点是实现太复杂了,也不好维护,对报表开发人员的要求有点高。简单一点的方式是使用支持 MongoDB 分批取数的报表工具,这样就可以解决大数据量查询 ...
分类:数据库   时间:2020-06-02 22:58:33    阅读次数:88
HDFS基础(二)shell操作
Hadoop fs 命令分类: 1、本地-》HDFS: put(从本地文件系统中复制单个或多个源路径到目标文件系统) hadoop fs -put localfile /user/hadoop/hadoopfile copyFromLocal(和put命令相似) hadoop fs -copyFro ...
分类:系统相关   时间:2020-06-02 22:55:20    阅读次数:78
CDH 6.3.2 开启kerberos 遇到 的坑
CDH6.3.2开启kerberos遇到的坑标签(空格分隔):大数据平台构建一:关于安装系统的一些坑二:关于开启KerberosJava的一些坑三:关于hive一:关于安装系统的一些坑1)安装之前一定确认jdk的安装目录因为通过centos7这个系统默认会在装之前会自带一些jdk版本要彻底卸载这个jdk,最好是保证安装系统之前自装最简的centos7.5x64mini2)系统最好分区为三个/swa
分类:其他好文   时间:2020-06-02 18:51:54    阅读次数:209
如何通过IAM打造零信任安全架构
万物互联时代来临,面对越来越严峻的企业网络安全及复杂的(如微服务,容器编排和云计算)开发、生产环境,企业 IT 急需一套全新的身份和访问控制管理方案。 为了满足企业需求,更好的服务企业用户,青云QingCloud 推出了 IAM 服务,使用者可以统一管理和控制接入实体的认证和授权,更安全地自主管控账 ...
分类:其他好文   时间:2020-06-02 13:24:44    阅读次数:116
杉岩喜获信创独角兽百强称号,信创项目落地进行时
在近期由《互联网周刊》与eNet研究院共同发布的2020信创产业独角兽100强名单中,杉岩数据的高性能安全存储一体机荣誉上榜,名列第38位,并获评“别出机杼”。2020年是信创产业全面推广的起点,信创产业包含了从IT底层基础软硬件到上层应用软件的全产业链的安全可控,全面提升信息安全管理和技术防护能力,让本质安全可掌控、可研究、可发展、可生产。归根结底,是基于国产软硬件进行信息化建设。其涉及到一条庞
分类:其他好文   时间:2020-06-02 12:50:50    阅读次数:765
14深度学习-卷积
1.简述人工智能、机器学习和深度学习三者的联系与区别。 联系:深度学习使得机器学习能够实现众多应用,并拓展了人工智能的领域范畴。 区别:人工智能是目的,是结果;深度学习、机器学习是方法,是工具;深度学习则是一种实现机器学习的技术;它适合处理大数据。 2. 全连接神经网络与卷积神经网络的联系与区别。 ...
分类:其他好文   时间:2020-06-02 09:46:53    阅读次数:51
数据分析用python语言有什么好处?
数据分析对于各个行业都起到了非常重要的作用,那么应该如何进行数据分析呢?python的出现刚好可以解决我么的烦恼,作为数据分析的一大利器,python做数据分析的时候拥有众多优势,广受大家的喜欢。
分类:编程语言   时间:2020-06-02 09:46:21    阅读次数:185
Docker和K8S
本文来源:鲜枣课堂 2010年,几个搞IT的年轻人,在美国旧金山成立了一家名叫“dotCloud”的公司。 这家公司主要提供基于PaaS的云计算技术服务。具体来说,是和LXC有关的容器技术。 LXC,就是Linux容器虚拟技术(Linux container) 后来,dotCloud公司将自己的容器 ...
分类:其他好文   时间:2020-06-02 00:15:55    阅读次数:77
Hadoop之HDFS入门实战
一、HDFS优缺点 优点: 高容错性 数据自动保存多个副本 某一个副本丢失后,它可以自动恢复 适合处理大数据 数据规模,可以达到PB级 文件规模,能够处理百万规模的文件数量 可构建在廉价机器上,通过多副本保证可靠性 缺点: 不适合低延时数据访问 不适合对大量小文件进行存储 存储大量小文件,他会占用N ...
分类:其他好文   时间:2020-06-01 23:45:55    阅读次数:68
新基建之大数据中心发展
数据中心成为“新基建”中的重要一项,其重大意义主要体现在“新”上。在数字经济时代,数据是一种经济社会发展所必要生产要素,也是一种基础设施。物联网、车联网、工业互联网的推广应用带来数据指数级增长,海量的异构数据都将进入数据中心进行集中存储和处理,这对计算设施和数据中心都提出了更新更高的要求。独立第三方数据中心优势渐显:相比于电信运营商,独立第三方数据中心建设速度更快、客户定制性更强、重视程度更高,且
分类:其他好文   时间:2020-06-01 15:37:27    阅读次数:1079
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!