储存方面:数据湖中数据为非结构化的,所有数据都保持原始形式;存储所有数据,并且仅在分析时再进行转换。数据仓库就是数据通常从事务系统中提取,在将数据加载到数据仓库之前,会对数据进行清理与转换。 数据组织形式:数据湖就是捕获半结构化和非结构化数据。而数据仓库则是捕获结构化数据并将其按模式组织。 用途:数 ...
分类:
其他好文 时间:
2020-06-28 20:54:41
阅读次数:
67
何晗:HanLP:面向生产环境的自然语言处理工具包 清华:THULAC:一个高效的中文词法分析工具包 搜狗:搜狗实验室分词和词性标注 斯坦福:CORENLP 哈工大:LTP:语言技术平台(Language Technology Platform) NLPIR:NLPIR 中科大:科大讯飞 云孚科技 ...
分类:
其他好文 时间:
2020-06-26 22:09:35
阅读次数:
413
ELKR 概述 ELK(R) = Elasticsearch + Logstash + Kibana (+ Redis) 是一套完整的工业级日志分析工具。 Elasticsearch 是整个日志分析系统的核心,它负责对日志数据进行分析、索引等重要工作; Logstash 则主要用于对日志数据进行初步 ...
分类:
其他好文 时间:
2020-06-26 18:13:31
阅读次数:
74
前言 性能分析是衡量应用程序在代码级别的相对性能。性能分析将捕捉的事件包括:CPU的使用,内存的使用,函数的调用时长和次数,以及调用图。性能分析的行为也会影响应用性能。 在 PHP 世界里,有两个截然不同的的性能分析器——主动和被动。 主动 VS 被动性能分析 主动分析器在开发过程中使用,由开发人员 ...
分类:
其他好文 时间:
2020-06-23 15:33:49
阅读次数:
49
StackOverflowError和OutOfMemoryError是JVM里的两种Error。每个运行时区域——程序计数器 、Java虚拟机栈、本地方法栈、Java堆、方法区、直接内存发生Error的原因和错误信息是不同的。 不是所有的StackOverflowError和OutOfMemory ...
分类:
其他好文 时间:
2020-06-20 19:37:30
阅读次数:
64
crash 是目前广泛使用的 linux 内核崩溃转储文件的分析工具,掌握 crash 的使用技巧,对于分析定位内核崩溃的问题,有着非常重要的作用。本文首先介绍了 crash 的基本概念和安装方法,其次详细介绍了如何使用 crash 工具分析内核崩溃转储文件,包括各种常用调试命令的使用方法,最后以几 ...
分类:
系统相关 时间:
2020-06-14 10:54:25
阅读次数:
61
一、top命令 top命令是Linux下常用的性能分析工具,能够实时显示系统中各个进程的资源占用状况,类似于Windows的任务管理器。下面详细介绍它的使用方法。 top - 01:06:48 up 1:22, 1 user, load average: 0.06, 0.60, 0.48 Tasks ...
分类:
系统相关 时间:
2020-06-12 12:51:30
阅读次数:
66
链路追踪工具 简介: Zipkin:是Twitter开源的调用链分析工具,目前基于springcloud sleuth得到了广泛的使用,特点是轻量,使用部署简单。 Pinpoint:是韩国人开源的基于字节码注入的调用链分析,以及应用监控分析工具。特点是支持多种插件,UI功能强大,接入端无代码侵入。 ...
分类:
其他好文 时间:
2020-06-11 16:25:02
阅读次数:
187
我们都明白,相对于枯燥的文字,一些有视觉冲击的事物印象更深。在工作过程中,如在日常的工作汇报中,将采集到的数据信息进行统计、分析,再将数据用图形的方式表达。会方便我们对数据的把控,更直观了解到数据情况。这就是今天要给大家介绍的可视化。在网上一搜,数据可视化,各种各样的如下图这样的可视化图表。相信很多人都看过这些大屏的图表,是不是感觉效果很酷炫,做起来会很复杂,按照传统的方式去做,使用数据分析工具结
分类:
其他好文 时间:
2020-06-11 01:14:04
阅读次数:
138
大数据时代,随着数据可视化越来越受到推崇,特别是大屏展示技术的发展,企业对数据可视化的要求也越来越高。传统报表工具早已不堪重负,最显著的原因就是数据量的庞大,每年的双十一、双十二,购物产生的数据数以兆计!在一张表格上来分析这些数据根本是天方夜谭。所以说传统的报表工具已经不能满足人们对于数据可视化的期望了,而大数据分析工具却可以为人们提供更好的选择。RDP新推出的可视化报表工具,就是不错的大数据处理
分类:
其他好文 时间:
2020-06-11 00:51:15
阅读次数:
73