一、什么是架构？ 1. 生活中总是时不时听到一些高大上的词，例如：微服务架构、系统架构、应用架构、部署架构、组织架构、大数据架构，可惜的是很多人都在谈架构，但是一问起来，没几个能说出架构是啥 2. 架构的本质是为了做增长 3. 架构做增长的方式就是以拆分生命周期达到 二、什么是生命周期？ 生命周期就 ...
分类：
其他好文 时间：
2019-08-15 12:38:19
阅读次数：
99
苏宁人工智能研发中心智能创意平台架构成长之路(一)--长篇开篇 https://www.cnblogs.com/laoqing/p/11326132.html 我们接着第一篇继续。 (这是第二篇大数据架构篇，成长之路序列会包含多篇，笔者作为这个平台的架构兼技术经理，充分讲述其中的迭代心酸之路以及中间 ...
分类：
其他好文 时间：
2019-08-09 17:30:56
阅读次数：
85
package jul30; public enum KeCheng { L1("大数据开发工程师"),L2("大数据挖掘工程师"),L3("大数据架构师"); private String str; public String getStr() {return str;} public void ...
分类：
其他好文 时间：
2019-07-30 12:52:27
阅读次数：
98
1. 五种主流的大数据架构 收集各大互联网公司大数据平台架构 1. 酷狗音乐的大数据平台架构： https://www.infoq.cn/article/kugou-big-data-platform-restructure 2. 滴滴大数据离线和实时平台架构和实践： https://myslide ...
分类：
其他好文 时间：
2019-07-17 00:03:43
阅读次数：
155
1.画出你们的大数据架构，然后针对架构提问，如何做到精准一次、小文件规避等2.为什么会产生小文件3.为什么Hadoop不怕数据量大，却怕文件小4.你能告诉我路径占不占元数据内存，如果占，占多少5.小文件会产生什么样的问题，产生的问题会对你们的集群产生什么样的影响6.画出Yarn工程流程7.mr和sp ...
分类：
其他好文 时间：
2019-06-21 09:29:38
阅读次数：
185
这两天真的是被《啥是佩奇》这支广告片刷屏了。佩奇明明是个喜剧角色，却把所有人都给看哭了！中间的剧情，小孙子一句：“想要佩奇”，结果爷爷就开始了满村子的寻找佩奇，到最后寻找到了小编认为是最好看的佩奇不知道大家看了之后是什么感觉，反正我看了之后的感觉是非常感动了。不过经过几天的发酵，“佩奇”这两个字似乎有了更多的含义了！各种”佩奇“齐出不穷，女人的“佩奇”是什么样的？程序员的“佩奇”是什么样的？在这里
分类：
其他好文 时间：
2019-05-28 12:21:43
阅读次数：
128
文 |彭超 瓜子大数据架构师 交流微信 | datapipeline2018 一、为什么选择Kafka 为什么选Kafka？鉴于庞大的数据量，需要将其做成分布式，这时需要将Q里面的数据分到许多机器上进行存储，除此之外还有分布式的计算需求。同时需要支持多语言，如Java、GO、php等，另外还有高可用 ...
架构师不是一个职业工种,而是一种能力,而且架构师也分很多种,不同领域的架构师是不一样的.比如互联网架构师和物联网架构师,没有什么可对比的.架构要考虑什么1.考虑系统能做什么,不能做什么,就是常说的系统边界2.确定架构内部的模块与模块之间的关系,以及module与外部是什么关系3.确定非功能性需要,架构的可扩展性,可用性,可维护性以及安全性4.架构确定以后要能够指导开发人员根据架构思想去设计和演化,
分类：
编程语言 时间：
2019-04-15 18:13:22
阅读次数：
190
ClouderaManager视频教程_ClouderaManager大数据平台视频教程课程下载地址：https://pan.baidu.com/s/1Os8APg7dgXfsqp71SlUoYQ提取码:bfqv通过本课程的学习，可以掌握ClouderaManager的应用场景和使用规范，并可以学习到大型公司企业内部的大数据架构图。对大数据人员来讲，可以掌握企业级常用的Linux命令和快速安全的安
分类：
其他好文 时间：
2018-12-14 12:56:47
阅读次数：
172
? 随着数据已经逐步成为一个公司宝贵的财富，大数据团队在公司往往会承担更加重要的角色。大数据团队往往要承担数据平台维护、数据产品开发、从数据产品中挖掘业务价值等重要的职责。所以对于很多大数据工程师，如何根据业务需求去选择合适的大数据组件，做合适的大数据架构工作就是日常工作中最常遇到的问题。在这里根据 ...
分类：
其他好文 时间：
2018-12-10 00:45:25
阅读次数：
185
