核心原理： 该项目核心就是文件分块上传。前后端要高度配合，需要双方约定好一些数据，才能完成大文件分块，我们在项目中要重点解决的以下问题。 * 如何分片； * 如何合成一个文件； * 中断了从哪个分片开始。 如何分，利用强大的js库，来减轻我们的工作，市场上已经能有关于大文件分块的轮子，虽然程序员的天 ...
分类：
编程语言 时间：
2020-05-23 16:14:01
阅读次数：
77
这里只写后端的代码，基本的思想就是，前端将文件分片，然后每次访问上传接口的时候，向后端传入参数：当前为第几块文件，和分片总数 下面直接贴代码吧，一些难懂的我大部分都加上注释了： 上传文件实体类： 看得出来，实体类中已经有很多我们需要的功能了，还有实用的属性。如MD5秒传的信息。 首先是文件数据接收逻 ...
分类：
编程语言 时间：
2020-05-23 14:51:56
阅读次数：
56
1.官网下载eleasticsearch和kibana，两个版本应安装一致，否则会出现kibana连接不上eleasticsearch的情况(这里我以6.3.1为例) eleasticsearch的下载地址：https://www.elastic.co/cn/downloads/past-relea ...
分类：
系统相关 时间：
2020-05-21 21:07:31
阅读次数：
71
规划、搭建过程：6个redis实例，一般会放到3台硬件服务器注：在企业规划中，一个分片的两个分到不同的物理机，防止硬件主机宕机造成的整个分片数据丢失。端口号：7000-7005 # 1。 安装集群插件 EPEL源安装ruby支持yum install ruby rubygems -y # 2. 配置 ...
分类：
数据库 时间：
2020-05-21 16:24:53
阅读次数：
62
前言 本篇文章主要介绍的是SpringBoot切面Aop的demo简单讲解。 SpringBoot Aop 说明：如果想直接获取工程那么可以直接跳到底部，通过链接下载工程代码。 切面(Aop) 一、概念 AOP（Aspect OrientedProgramming）：面向切面编程，面向切面编程（也叫 ...
分类：
编程语言 时间：
2020-05-21 00:27:47
阅读次数：
51
Grafana-Zabbix https://alexanderzobnin.github.io/grafana-zabbix/guides/gettingstarted/ Grafana-Elasticsearch https://grafana.com/docs/grafana/v6.7/fea ...
分类：
其他好文 时间：
2020-05-19 21:00:21
阅读次数：
342
众所皆知，web上传大文件，一直是一个痛。上传文件大小限制，页面响应时间超时.这些都是web开发所必须直面的。 本文给出的解决方案是：前端实现数据流分片长传，后面接收完毕后合并文件的思路。 实现文件夹上传，要求：服务端保留层级结构，支持10w级别的文件夹上传。 大文件上传及断点续传，要求：支持50G ...
分类：
Web程序 时间：
2020-05-19 14:34:53
阅读次数：
74
NET Core接入ElasticSearch 7.5 写在前面 最近一段时间，团队在升级ElasticSearch（以下简称ES），从ES 2.2升级到ES 7.5。也是这段时间，我从零开始，逐步的了解了ES，中间也踩了不少坑，所以特地梳理和总结一下相关的技术点。 ES小趣闻： 多年前，一个叫做S ...
分类：
Web程序 时间：
2020-05-18 22:57:58
阅读次数：
80
1. 查看搜索setting信息 mp_index/_settings 2. 设置分片数量 3, 修改数据刷新间隔 { "refresh_interval": "30s" # -1 关闭 } # 设置为30秒刷新频率 refresh_interval 可以在既存索引上进行动态更新。 在生产环境中，当 ...
分类：
其他好文 时间：
2020-05-18 12:09:40
阅读次数：
62
概述 Map Reduce 分布式并行编程：借助一个集群通过多台机器同时并行处理大规模数据集 1、mapreduce编程思想 核心设计两个函数：Map函数和Reduce函数 策略：分而治之，把非常庞大的数据集，切分成非常多独立的小分片，然后为每一个分片单独地启动一个map任务，最终通过多个map任务 ...
分类：
其他好文 时间：
2020-05-18 00:31:27
阅读次数：
133
