科技公司飞速发展和数字科技日益重要的今天,万物互联、人工智能的时代业已到来,海量数据资产被创造出来并亟待分析,从而衍生出了很多前所未有的业务需求,而大数据计算技术完美地解决了海量数据的收集、存储、计算、分析的问题。未来,更多人将学会分析数据,并将数据的洞察运用到工作和生活中的方方面面。什么是大数据大数据,IT行业术语,是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处
分类:
其他好文 时间:
2020-07-12 16:30:47
阅读次数:
87
在Java虚拟机中,如果reference类型的数据中存储的数值代表的是另外一块内存的起始地址,就称这块内存代表着一个引用。一共有4类引用: 强引用(Strong Reference) 类似Object obj = new Object()这类的引用,只要强引用还存在,垃圾收集器永远不会回收掉被引用 ...
分类:
编程语言 时间:
2020-07-12 13:53:05
阅读次数:
71
概述 我们在上一篇Windows平台分布式架构实践 - 负载均衡中讨论了Windows平台下通过NLB(Network Load Balancer) 来实现网站的负载均衡,并且通过压力测试演示了它的效果,可以说还是非常的理想的。同时我们也收集到了不少的问题,比如说如何在这种分布式的架构下使用Sess ...
第六天的问题 1'方法就是函数的意思,但定义不太一样public static void nprintln(String message,int n){} 2'finalize()方法,垃圾收集器。析构函数回收前调用,清理回收对象 3'输入不同 scanner类 next方法、nextLine方法 ...
分类:
其他好文 时间:
2020-07-11 23:19:02
阅读次数:
88
1 kafka介绍 Kafka是一款性能非常好的并且支持分布式的消息队列中间件由于它的高吞吐特性,Kafka通常使用在大数据领域,如日志收集平台Kafka是一个流处理平台,因为它在工作中就像是一个可以支撑高吞吐量的管道,数据像水一样流进去,然后另外一端再去读取这些数据我们就可以把Kafka看作是一种 ...
分类:
其他好文 时间:
2020-07-11 13:02:34
阅读次数:
55
导入MySQL数据库出现"T FOREIGN_KEY_CHECKS = 0"错误 解决方法 来自:https://www.itbulu.com/foreign-key-checks.html 数据库从阿里云虚拟主机导出,出现"T FOREIGN_KEY_CHECKS = 0"提示错误,以及一行小字" ...
分类:
其他好文 时间:
2020-07-11 09:34:45
阅读次数:
58
学习地址:https://www.bilibili.com/video/BV1mf4y1S72o?p=4 本章内容 元素过滤器ElementFilter 元素收集器FilterElementCollector 应用过滤器 快速过滤器QuickFilter 慢速过滤器SlowFilter 逻辑过滤器L ...
分类:
其他好文 时间:
2020-07-10 18:52:12
阅读次数:
118
1、flume日志收集架构如下 2、解压安装包,修改文件夹名称,配置环境变量 tar -zxvf apache-flume-1.6.0-bin.tar.gz export FLUME_HOME=/soft/flume export PATH=$PATH:$FLUME_HOME/bin 修改conf下 ...
分类:
Web程序 时间:
2020-07-10 18:37:36
阅读次数:
66
二、jvm内存泄漏 1.堆内存中主要存放对象、数组等,只要不断地创建这些对象,并且保证GC Roots到对象之间有可达路径来避免垃圾收集回收机制清除这些对象,当这些对象所占空间超过最大堆容量时,就会产生OutOfMemoryError的异常。 新产生的对象最初分配在新生代,新生代满后会进行一次Min ...
分类:
其他好文 时间:
2020-07-10 18:35:00
阅读次数:
68
一、代码覆盖率统计工具的能与不能 能:代码覆盖率统计能用来发现没有被测试覆盖的代码。 1、测试过程中覆盖和未覆盖的地方,可能存在的风险。分析未覆盖代码,反推在测试设计是否充分,进一步明确测试设计阶段的问题。 2、发现测试死角、冗余代码、历史废弃代码。有助于发现多个测试用例都覆盖不到的代码,收集方法覆 ...
分类:
编程语言 时间:
2020-07-10 09:15:47
阅读次数:
66