一、简介 Hadoop是使用Java编写，允许分布在集群，使用简单的编程模型的计算机大型数据集处理的Apache的开源框架。 解决的问题： （1）海量数据的存储 [HDFS] （2）海量数据的分析 [MapReduce] （3）资源管理调度 [YARN] 二、hadoop架构 在其核心，Hadoop ...
分类：
其他好文 时间：
2020-05-03 10:26:41
阅读次数：
66
ElasticSearch 全文搜索属于最常见的需求，开源的 "Elasticsearch" （以下简称 Elastic）是目前全文搜索引擎的首选。 它可以快速地储存、搜索和分析海量数据。维基百科、Stack Overflow、Github 都采用它。 概念 Elastic会索引所有字段，查询就是查 ...
分类：
其他好文 时间：
2020-04-29 16:41:27
阅读次数：
64
Hadoop的下载和安装 一：Hadoop的简介 Apache的Hadoop是一个开源的、可靠的、可扩展的系统架构，可利用分布式架构来存储海量数据，以及实现分布式的计算。 Hadoop许使用简单的编程模型在计算机集群中对大型数据集进行分布式处理。可以从单个服务器扩展到数千台机器， 每个机器都提供本地 ...
分类：
其他好文 时间：
2020-04-29 01:25:12
阅读次数：
151
普通的redis读写分离架构面对海量数据时存储力是不够的，所以需要redis cluster集群来分布式缓存数据。 redis cluster 支撑N个redis master node，每个master node都可以挂载多个slave node 读写分离的架构，对于每个master来说，写就写到 ...
分类：
其他好文 时间：
2020-04-28 23:17:05
阅读次数：
78
1.写在前面 经常觉得，工作一年半了，除了自学了Oracle及SQL的一些基本操作，其余的什么都不会（此处省略吐槽公司的一万字......）。本人又是一个爱钱如命的人，无奈却是一个好高骛远、眼高手低之徒，自媒体无idea，下苦力挣辛苦钱也是不甘心。除了吹牛逼，也没任何可以拿得出手的能力，因此想回炉重 ...
分类：
编程语言 时间：
2020-04-26 16:53:53
阅读次数：
75
建立岗位胜任力模型能够帮助企业明确用人标准,预测求职者未来工作绩效,发现高潜人才,摸清人才发展现状等。但有些企业不知道怎么筛选比较市面上的建模系统,导致走了很多弯路。现在就来为大家介绍一下:人啊人—T12岗位建模对比市面常见建模后台有什么优势?及有什么区别?一、中国人群大数据构建海量数据库,智能分析匹配T12系统建模后台有1800W中国人群大数据与500多个优秀岗位模型数据,能够智能分析和匹配受测
分类：
其他好文 时间：
2020-04-26 11:05:11
阅读次数：
61
多路查找树 虽然二叉树的效率很高，但是也存在一些问题！二叉树是需要加载进内存的，倘若结点少无所谓，若有一亿个结点，就会有海量数据，会对速度造成影响 1. 多叉树 在二叉树中，每个结点规定最多有两个子结点，若允许每个结点可以有更多的数据项和子结点，那么就是多叉树 多叉树通过重新组织结点，减少树的高度， ...
分类：
编程语言 时间：
2020-04-24 20:11:25
阅读次数：
64
智能驾驶技术的迭代研发，需要多种传感器、海量数据、海量场景的支撑。而目前多种传感器Gbit/s级别的数据同步采集、海量数据的快速分析和评估、关键场景的切片和提取，是业界公认的棘手问题。为了解决上述的棘手问题，经纬恒润推出了智能驾驶实车测试系统——VDAS。VDAS主要由数据采集设备、环境感知系统、数据分析软件VDA组成。数据采集设备数据采集设备由车载工控机、多种数据采集板卡、传感器、车载显示屏等组
分类：
其他好文 时间：
2020-04-22 11:39:47
阅读次数：
80
1、讲解redis是为了什么？ topic：高并发、亿级流量、高性能、海量数据的场景，电商网站的商品详情页系统的缓存架构 商品详情页系统，大型电商网站，会有很多部分组成，但是支撑高并发、亿级流量的，主要就是其中的大型的缓存架构 在这个大型的缓存架构中，redis是最最基础的一层 高并发，缓存架构中除 ...
分类：
其他好文 时间：
2020-04-21 09:46:24
阅读次数：
54
基本讲解到现在，大家其实直接到公司里，就可以去搭建redis了 因为其实有些东西，也许没有讲解到细节的一些东西，比如一些参数的设置 不同的公司，不同的业务，不同的数据量，可能要调节的参数不同 到这里为止，大家就差不多了，按照这个思路，去搭建redis支撑高并发、高可用、海量数据的架构，部署 可以用公 ...
分类：
系统相关 时间：
2020-04-21 09:40:50
阅读次数：
81
