一、简介 在每个节点(driver和executor)上运行的管理器,该接口提供用于在本地和远程将block放置和检索到各种存储(内存,磁盘和堆外)的接口。 二、源码 private[spark] class BlockManager( executorId: String, rpcEnv: Rpc ...
分类:
其他好文 时间:
2020-07-27 23:41:12
阅读次数:
73
Elasticsearch中当我们设置Mapping(分词器、字段类型)完毕后,就可以按照设定的方式导入数据。
分类:
其他好文 时间:
2020-07-27 23:37:15
阅读次数:
70
ES建立索引完成全文检索的前提是将待检索的信息导入Elaticsearch。
分类:
其他好文 时间:
2020-07-27 17:58:51
阅读次数:
122
首先安装Vagrant,和VirtualBox, Vagrant下载地址:https://www.vagrantup.com/VirtualBox下载地址:https://www.virtualbox.org/ wind+r cmd 输入vagrant看有没有装上 然后使用vagrant init ...
分类:
其他好文 时间:
2020-07-27 13:56:34
阅读次数:
82
mysql5.7源码安装及常用命令一、mysql安装1.旧版本卸载rpm-qa|grep"mariadb"rpm-ev软件包名称--nodeps2.安装依赖yum-yinstallgccgcc-c++ncursesncurses-develcmakebisonbison-devel3.mysql下载yum安装(可选)yuminstallmariadb-servermariadbmariadb-li
分类:
数据库 时间:
2020-07-27 10:00:19
阅读次数:
125
leetcode题目-16.25.LRU缓存 设计和构建一个“最近最少使用”缓存,该缓存会删除最近最少使用的项目。缓存应该从键映射到值(允许你插入和检索特定键对应的值),并在初始化时指定最大容量。当缓存被填满时,它应该删除最近最少使用的项目。 它应该支持以下操作: 获取数据 get 和 写入数据 p ...
分类:
其他好文 时间:
2020-07-27 09:38:03
阅读次数:
65
说起ELK相信大家都不陌生,他可不是一个软件,是三个软件 logstash,elasticsearch,Kibana 组成的可以打造大规模日志实时处理的系统。 Elasticsearch 是一个基于 Lucene 的、支持全文索引的分布式存储和索引引擎,主要负责将日志索引并存储起来,方便业务方检索查 ...
分类:
其他好文 时间:
2020-07-26 15:54:23
阅读次数:
71
TF-IDF(term frequency–inverse document frequency)是一种用于信息检索与数据挖掘的常用加权技术,常用于挖掘文章中的关键词,而且算法简单高效,常被工业用于最开始的文本数据清洗。 TF-IDF有两层意思,一层是"词频"(Term Frequency,缩写为T ...
分类:
其他好文 时间:
2020-07-26 01:56:59
阅读次数:
77
此博客链接: 题目链接:https://leetcode-cn.com/problems/min-stack/submissions/ 设计一个支持 push ,pop ,top 操作,并能在常数时间内检索到最小元素的栈。 push(x) —— 将元素 x 推入栈中。pop() —— 删除栈顶的元素 ...
分类:
其他好文 时间:
2020-07-25 09:45:52
阅读次数:
70
1 using System; 2 using System.Net; 3 using System.IO; 4 using System.Text; 5 using System.Text.RegularExpressions; 6 using System.Net.Security; 7 usi ...
分类:
其他好文 时间:
2020-07-25 09:12:50
阅读次数:
65