作者：李毓Milvus旨在帮助用户实现海量非结构化数据的近似检索和分析。单个Milvus实例可处理十亿级数据规模，而对于百亿或者千亿级数据，则需要一个Milvus集群实例。Kubernetes是一个可移植的，可扩展的开源平台，用于管理容器化的工作负载和服务，方便了声明式配置和自动化。如果我们希望在Kubernetes集群中一个存储卷可以被多个Pod同时挂载，多个Pod同时修改相同数据，这时便需要共
分类：
Web程序 时间：
2020-10-05 21:26:08
阅读次数：
41
前言 作为一名程序员，高并发系统是技术栈中必不可少的，高并发是指在同一个时间点，有很多用户同时的访问URL地址，比如：淘宝的双11，双12，就会产生高并发，如贴吧的爆吧，就是恶意的高并发请求，也就是DDOS攻击，再屌丝点的说法就像玩撸啊撸被ADC暴击了一样,那伤害你懂得(如果你看懂了，这个说法说明是 ...
分类：
其他好文 时间：
2020-09-17 20:05:22
阅读次数：
46
互联网实现了“人人互联”和“人物互联”，物联网进一步将其用户端延伸和扩展到任何物品与物品之间。物联网被认为是继计算机、互联网之后，世界信息产业发展的第三次浪潮，将会成为下一个万亿级的通信业务，也将成为下一个创业狂潮。物联网技术正在稳步增长，甚至在不久的以后，物联网趋势将是引领技术的不可或缺的东西。 ...
分类：
其他好文 时间：
2020-09-12 21:53:19
阅读次数：
56
我们一直在追求架构的艺术！！问题分析经过几分钟的排查，数据库情况如下：数据库采用Sqlserver2008R2，单表数据量21亿。无水平或者垂直切分，但是采用了分区表。分区表策略是按时间降序分的区，将近30个分区。正因为分区表的原因，系统才保证了在性能不是太差的情况下坚持至今。此表除聚集索引之外，无其他索引，无主键（主键其实是利用索引来快速查重的）。所以在频繁插入新数据的情况下，索引调整所耗费的性
分类：
数据库 时间：
2020-08-26 17:15:26
阅读次数：
70
作为发展最为迅猛的物流企业之一，申通快递一直积极探索技术创新赋能商业增长之路，以期达到降本提效目的。目前，申通快递日订单处理量已达千万量级，亿级别物流轨迹处理量，每天产生数据已达到 TB 级别，使用 1300+ 个计算节点来实时处理业务。
分类：
其他好文 时间：
2020-08-08 00:34:55
阅读次数：
70
https://www.cnblogs.com/xichji/p/11713293.html 超实用的mysql分库分表策略，轻松解决亿级数据问题 ...
分类：
数据库 时间：
2020-07-27 17:53:12
阅读次数：
91
1. 一期工程项目技术架构 1）业务驱动 2）问题驱动 2. 二期工程项目技术架构 项目优化原则： 1）优先从架构和程序进行优化 2）考虑增加集群扩容 做任务为什么不适用kafka？ 1）此业务用户量还小 2）数据量小 3）使用kafka大材小用，资源浪费 为什么同时使用db和redis 1）用户成 ...
分类：
其他好文 时间：
2020-07-12 00:58:36
阅读次数：
115
深度剖析了各个基础技术的源码(ZooKeeper、Hive、Spark、Flink、Hadoop等)，对这些基础技术知识动态的排列组合，形成大数据全局架构观，并深入讲述大数据全局架构设计的方方面面，打造真正满足企业万亿级海量数据规模的数据中台，真正赋能前台业务。同时，在企业万亿级真实项目落地环节，采用高性能、高可用、高扩展的架构设计原则，技术上更是融合了企业级主流的离线架构和实时架构，带领大家构建
分类：
其他好文 时间：
2020-06-23 18:39:30
阅读次数：
58
本课程针对企业不同数据规模技术方案进行讲解，紧贴企业热门需求，深入讲解企业级大数据技术的数据存储技术、数据采集技术、数据处理技术、任务调度技术等；课程针对知识点进行企业级案例式教学，理论结合实战，从0到1构建大数据生态技术的方方面面，内容涵盖大数据平台、Spark、Flink、OLAP等核心技术；用真实的企业级实时数仓项目、离线数仓项目、PB级实时用户行为分析系统、千亿级实时广告系统等多个大型项目
分类：
其他好文 时间：
2020-06-22 19:15:45
阅读次数：
50
一、架构简述 RocketMQ阿里开源的一个分布式消息传递和流媒体平台，具有低延迟，高性能和可靠性， 万亿级容量和灵活的可伸缩性。跟其它中间件相比，RocketMQ的特点是纯JAVA实现,在发生宕机和其它故障时消息丢失率更低。 它由四个部分组成：nameserver，broker，生产者和消费者。它 ...
分类：
其他好文 时间：
2020-06-21 15:31:30
阅读次数：
60
