Web开发-数据研发工程师 岗位描述 1、从事互联网海量数据挖掘分析系统的开发 2、完成海量数据挖掘分析工作，并能快速获取有效数据进行异常数据排查3、进行数据分析平台的构建、对业务部门提供数据支持服务 岗位描述 1、从事互联网海量数据挖掘分析系统的开发 2、完成海量数据挖掘分析工作，并能快速获取有效 ...
分类：
其他好文 时间：
2019-08-31 01:15:57
阅读次数：
132
Istio 功能与作用 Istio服务管控包括下列的典型应用场景：分布式调用追踪在微服务架构中，业务的调用链非常复杂，一个来自用户的请求可能涉及到几十个服务的协同处理。因此需要一个跟踪系统来记录和分析同一次请求在整个调用链上的相关事件，从而帮助研发和运维人员分析系统瓶颈，快速定位异常和优化调用链路。 ...
分类：
其他好文 时间：
2019-08-30 22:44:13
阅读次数：
95
分析针对{历史数据，每天的增量数据} 站长工具 seo 优化， pageRank http://seo.chinaz.com/www.taobao.com PV (page view ） UV(user view) 页面访问量，用户访问量 一针对增量数据进行分析。 设定淘宝300G/每天； 唯品会访... ...
分类：
其他好文 时间：
2019-08-25 14:02:37
阅读次数：
216
一、今日完成的工作 进一步分析系统需求，并和组员商议使用墨刀进行原型设计 二、明日计划 优化、细致系统要求 三、今日小结 确定的功能不清楚使用何种框架能有更好的效果，暂定使用Spring框架 ...
分类：
其他好文 时间：
2019-08-20 22:08:16
阅读次数：
90
1.1 持续集成、持续交付 介绍 参考博客：https://www.cnblogs.com/cay83/p/8856231.html 1、传统交付 1. 传统软件的开发与交付的周期都很漫长，从需求的分析、系统的设计、编写测试用例、系统开发、单元测试、组装测试到交付调试。 2. 每一次交付、升级，都需 ...
分类：
其他好文 时间：
2019-08-18 09:45:29
阅读次数：
110
第一：两个文件的交集，并集前提条件：每个文件中不得有重复行1. 取出两个文件的并集(重复的行只保留一份)2. 取出两个文件的交集(只留下同时存在于两个文件中的文件)3. 删除交集，留下其他的行1. cat file1 file2 | sort | uniq > file32. cat file1 f ...
分类：
系统相关 时间：
2019-08-17 00:37:25
阅读次数：
117
原文: http://106.13.73.98/__/83/ @[toc] 相比于6.x的版本，Rhel7/CentOS7增加或改进了以下7大特性。 1.身份管理 的跨平台信任机制：kerberos将完全兼容微软活动目录，实现完全使用活动目录进行认证。 ：该功能简化了RHEL加入微软活动目录的配置， ...
分类：
其他好文 时间：
2019-08-08 18:52:14
阅读次数：
103
前言 EFK可能都不熟悉，实际上EFK是大名鼎鼎的日志系统ELK的一个变种 在没有分布式日志的时候，每次出问题了需要查询日志的时候，需要登录到Linux服务器，使用命令cat -n xxxx|grep xxxx 搜索出日志在哪一行，然后cat -n xxx|tail -n +n行|head -n 显 ...
分类：
其他好文 时间：
2019-07-31 15:08:58
阅读次数：
538
Metrics类型 在上一小节中我们带领读者了解了Prometheus的底层数据模型，在Prometheus的存储实现上所有的监控样本都是以time series的形式保存在Prometheus内存的TSDB（时序数据库）中，而time series所对应的监控指标(metric)也是通过label ...
分类：
其他好文 时间：
2019-07-30 01:01:27
阅读次数：
165
大数据技术之Azkaban 一 概述 1.1 为什么需要工作流调度系统 1）一个完整的数据分析系统通常都是由大量任务单元组成： shell脚本程序，java程序，mapreduce程序、hive脚本等 2）各任务单元之间存在时间先后及前后依赖关系 3）为了很好地组织起这样的复杂执行计划，需要一个工作 ...
分类：
其他好文 时间：
2019-07-26 09:15:11
阅读次数：
265
