1、redis 是一个内存数据库,当redis 服务器重启,或电脑重启,数据会丢失,所以需要持久化到硬盘 2、redis 持久化机制: Redis 提供了多种不同级别的持久化方式: (1)RDB :默认方式,不需要配置。RDB持久化可以在指定的时间间隔内生成数据集的时间点快照(point-in-ti ...
分类:
其他好文 时间:
2020-05-19 01:07:19
阅读次数:
50
题目 A family hierarchy is usually presented by a pedigree tree. Your job is to count those family members who have no child. Input Specification: Each ...
分类:
其他好文 时间:
2020-05-18 18:45:58
阅读次数:
61
CSV转Excel,命中关键词标红 package com.wenwo.schedule.job.mainJob; import java.io.ByteArrayOutputStream; import java.io.File; import java.io.FileOutputStream; ...
分类:
其他好文 时间:
2020-05-18 16:11:50
阅读次数:
54
一.jenkins分布式作用在众多Job的场景下,单台jenkinsmaster同时执行代码clone、编译、打包及构建,其性能可能会出现瓶颈从而会影响代码部署效率,影响jenkins官方提供了jenkins分布式构建,将众多job分散运行到不同的jenkinsslave节点,大幅提高并行job的处理能力。不同的node可以分别执行测试和线上环境的操作。jenkins-系统管理-结点管理-新建节点
分类:
其他好文 时间:
2020-05-18 09:20:21
阅读次数:
54
概述 Map Reduce 分布式并行编程:借助一个集群通过多台机器同时并行处理大规模数据集 1、mapreduce编程思想 核心设计两个函数:Map函数和Reduce函数 策略:分而治之,把非常庞大的数据集,切分成非常多独立的小分片,然后为每一个分片单独地启动一个map任务,最终通过多个map任务 ...
分类:
其他好文 时间:
2020-05-18 00:31:27
阅读次数:
133
Apache Flink是一个框架和分布式处理引擎,用于在无界和有界数据流上进行有状态的计算。Flink被设计为在所有常见的集群环境中运行,以内存中的速度和任何规模执行计算。 Apache Flink is a framework and distributed processing engine ...
分类:
其他好文 时间:
2020-05-17 17:52:04
阅读次数:
92
Apache Spark Job 调优以提高性能(一) 假设你已经清楚了Spark 的 RDD 转换,Action 等内容。并且已经知道用web UI来理解为什么Job要花这么长时间时,Job、stage和task 也很清楚了。 如果不清楚可以看我的视频(。。。。) 在本文中,您将了解Spark程序 ...
分类:
其他好文 时间:
2020-05-17 17:50:13
阅读次数:
102
创建自定义对象的最简单方式就是创建一个Object的实例,然后再为它添加属性和方法。 var person = new Object(); person.name = 'Nicholas'; person.age = 29; person.job = 'Software Engineer'; Per ...
分类:
编程语言 时间:
2020-05-16 12:25:51
阅读次数:
58
1.操作系统(Operation System)主要在管理与驱动硬件,因此必须能管理内存、管理装置、负责行程管理以及系统呼叫,因此能够让硬件准备好就是一个好的系统了。 2.Unix的前身是贝尔实验室(Bell lab)的Ken Thompson用汇编语言写的,后来在1971-1973年间由Denni ...
分类:
系统相关 时间:
2020-05-16 00:40:01
阅读次数:
66
前言 消息队列:可以将原本同步执行的程序 解耦成异步执行,加上分布式的生产者和消费者架构 可以在一定程度上支撑大并发。 NSQ是go语言开发的消息队列,对nsqd进行水平扩展是它的部署、配置相对简单。 NSQ介绍 NSQ是1个分布式(distributed)、可扩展(scalable)、配置简单(O ...
分类:
其他好文 时间:
2020-05-14 19:03:34
阅读次数:
62