码迷,mamicode.com
首页 >  
搜索关键字:元数据    ( 3446个结果
反射框架Reflections
Reflections通过扫描classpath,索引元数据,并且允许在运行时查询这些元数据。 使用Reflections可以很轻松的获取以下元数据信息: 获取某个类型的所有子类;比如,有一个父类是TestInterface,可以获取到TestInterface的所有子类。 获取某个注解的所有类型/ ...
分类:其他好文   时间:2020-03-14 18:17:57    阅读次数:54
11.1.1namenode和datanode的数据结构和格式以及镜像fsimage和编辑日志edit
1.1.1 永久性数据结构 namenode的目录结构如下图 (1) VERSION属性文件 namespaceid文件系统命名空间唯一标识。 clusterID是将HDFS集群作为一个整体赋予的唯一标识符。 blockpoolID是数据块池的唯一标识。 CTime是namenode存储系统创建时间 ...
分类:其他好文   时间:2020-03-11 10:58:32    阅读次数:49
开源一个基于.netcore的企业级应用开发框架------FAP
Fap简介它一个企业级应用的快速开发平台。包含了所有企业级应用开发所需要的所有基础模块。可以使您更关注于业务的开发。github 基础模块主要包含的基础模块有:用户管理,角色管理,菜单管理,权限管理,组织管理,员工管理,流程引擎,报表引擎,任务调度,字典管理,多语言管理,元数据管理等。 公共组件1、 ...
分类:Web程序   时间:2020-03-09 13:17:23    阅读次数:83
(四)kubernetes 资源编排(YAML)
YAML是一种简洁的非标记语言。语法格式:?缩进表示层级关系?不支持制表符“tab”缩进,使用空格缩进?通常开头缩进2个空格?字符后缩进1个空格,如冒号、逗号等?“---”表示YAML格式,一个文件的开始?“#”注释k8syaml#yaml格式的pod定义文件完整内容:apiVersion:v1#必选,版本号,例如v1kind:Pod#必选,Podmetadata:#必选,元数据name:stri
分类:Web程序   时间:2020-03-08 17:15:36    阅读次数:101
数据库系统概论(二)数据库设计--数据字典、E-R图
数据字典 数据字典是数据库中数据的描述,也称为元数据。是数据的数据 数据字典建立于需求分析阶段,在设计过程中不断完善 这里的数据字典并不是指DBMS里的数据字典,DBMS中的数据(库)字典是DBMS在执行SQL语句时自动生成的 数据字典各部分的描述 ①数据项:数据流图中数据块的数据结构中的数据项说明 ...
分类:数据库   时间:2020-03-07 21:05:33    阅读次数:121
【2020】 DBus,一个更能满足企业需求的大数据采集平
功能远超Sqoop、DataX、Flume、Logatash、Filebeat等采集工具深知其他组件的局限性,才能彰显DBus的优越感当前有很多数据采集工具(Sqoop、DataX、Flume、Logatash、Filebeat等),他们或多或少都存在一些局限性。一个共性问题是缺乏统一的数据源端管控,所以也就无法找到统一的数据入口,那后续处理元数据或者血缘分析会异常困难。除此之外,现有各种数据采集
分类:数据库   时间:2020-03-05 19:28:19    阅读次数:110
Atlas(元数据管理)从扫盲到和Hive、HBase、Kafka、Flink等集成开发
先对数据分个类企业数据管理的内容及范畴通常包括交易数据、主数据以及元数据。(1)交易数据:用于纪录业务事件,如客户的订单,投诉记录,客服申请等,它往往用于描述在某一个时间点上业务系统发生的行为。(2)主数据:主数据则定义企业核心业务对象,如客户、产品、地址等,与交易流水信息不同,主数据一旦被记录到数据库中,需要经常对其进行维护,从而确保其时效性和准确性;主数据还包括关系数据,用以描述主数据之间的关
分类:其他好文   时间:2020-03-05 19:24:21    阅读次数:185
hadoop之各组件原理图详解
hadoop主备高可用故障转移机制 NameNode和2nn zookeeper保姆机制 zookeeper全新选举机制 zookeeper之非全新选举 NameNode和2nn hbase之存数据流程 hbase之创建表流程 hbase之查询路由(解决元数据信息不断增大 hbase之rowkey设 ...
分类:其他好文   时间:2020-03-04 22:29:35    阅读次数:152
MySQL 元数据:获取查询语句影响的记录数
MySQL 元数据 你可能想知道MySQL以下三种信息: 查询结果信息: SELECT, UPDATE 或 DELETE语句影响的记录数。 数据库和数据表的信息: 包含了数据库及数据表的结构信息。 MySQL服务器信息: 包含了数据库服务器的当前状态,版本号等。 在MySQL的命令提示符中,我们可以 ...
分类:数据库   时间:2020-03-04 09:27:41    阅读次数:76
MongoDB分片集群机制及原理
1. MongoDB常见的部署架构 * 单机版 * 复制集 * 分片集群 2. 为什么要使用分片集群 * 数据容量日益增大,访问性能日渐下降,怎么破? * 新品上线异常火爆,如何支撑更多用户并发? * 单库已有10TB数据,恢复需要1-2天,如何加速? * 地理分布数据3. 分片如何解决问题? 银行 ...
分类:数据库   时间:2020-03-04 00:06:40    阅读次数:123
3446条   上一页 1 ... 27 28 29 30 31 ... 345 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!