为什么需要跨库整合能力Smartbi支持多种数据源轻松接入,基本涵盖了市面上所有主流的数据库。无可否认多元的数据连接能力使Smartbi能快速连接现有数据源,构建统一的数据分析平台。但在项目实施过程中,往往会遇到以下的问题:我们企业数据存储在不同甚至不同类型的数据库里面,当用户查询数据的范围比较广,并不限于一个数据库时,需要跨多个数据库进行关联查询分析,如果按照传统的方式:先抽取到要通过ETL把数
分类:
其他好文 时间:
2020-08-03 23:27:20
阅读次数:
110
为什么需要Excel分析自助BI使得BI不再是高管领导的专利,促成了BI的平民化,更是BI的发展趋势。但自助BI工具的选择却并不简单,很多厂商推出了自己的自助分析工具,但在企业的使用过程中,实际达到的效果却不尽如人意。为什么?由于企业大部分业务用户更加习惯使用Excel,不愿意学习新的分析工具,基于以下几个原因:1.Excel提供了非常强大灵活的数据处理、数据分析以及数据可视化的能力。2.用户存在
分类:
其他好文 时间:
2020-08-03 23:27:05
阅读次数:
119
针对hive on mapreduce 1:我们可以通过一些配置项来使Hive在执行结束后对结果文件进行合并: 参数详细内容可参考官网:https://cwiki.apache.org/confluence/display/Hive/Configuration+Properties 1 2 3 4 ...
分类:
数据库 时间:
2020-08-03 19:56:21
阅读次数:
103
本文通过分析生产上一次Dubbo服务的拥堵事件,详细介绍Dubbo服务整个的请求流程以及与性能相关的参数。
分类:
其他好文 时间:
2020-08-03 09:49:49
阅读次数:
109
1.nosql的优点 》易拓展 》大数据量和高性能 》多样灵活的数据类型 》RDBMS(传统关系型数据库)VS NOSQL 2.nosql的实现 》以下三个软件都是对nosql理念的实现 3.nosql的重点知识点 》键值对存储,缓存,持久化 4.3v和3高 ...
分类:
数据库 时间:
2020-08-02 23:36:38
阅读次数:
95
写在前面Java后端程序员应该会遇到读取Excel信息到DB等相关需求,脑海中可能突然间想起ApachePOI这个技术解决方案,但是当Excel的数据量非常大的时候,你也许发现,POI是将整个Excel的内容全部读出来放入到内存中,所以内存消耗非常严重,如果同时进行包含大数据量的Excel读操作,很容易造成内存溢出问题但EasyExcel的出现很好的解决了POI相关问题,原本一个3M的Excel用
分类:
其他好文 时间:
2020-08-02 10:24:09
阅读次数:
95
国际惯例,先上图。这次聚会是由程序视界的安老师(程序员的成长课作者)和360的明哥组织的9人聚会,每个人都是身怀绝技,有985高校的客座教授,有月入4-5w做淘宝加运维的DBA,还有电视台的大数据分析师,靠自己的视频产品也能过的衣食无忧的大牛,还有大咖安晓辉老师,9月份就发布第七本新书了,靠着知乎、在行、写作版权在各个付费平台更是大神级别的存在,还有其他等等大牛这里就不一一介绍了,咱们重点来看这次
分类:
其他好文 时间:
2020-08-02 10:16:01
阅读次数:
71
背景介绍今天要介绍的小伙伴是90年的,6年工作经验,重庆邮电大学软件工程本科,以下属于小伙伴对自己的情况做的自述:我目前在中国平安人寿总部,负责部门的大数据平台和一些业务需求开发,属于后台和大数据都会,但都半吊子,吹牛还行,都不能算精通。工作除了开发大数据平台还有后台开发还有一部分管理,公司需求不复杂。在公司进步空间也小。涨薪慢,30多万年薪,加10w股票(几乎不加班)。目前有一个华为的机会到hr
分类:
其他好文 时间:
2020-08-02 10:11:02
阅读次数:
93
题意: 多组输入,给定a,b两个数组,长度分别为n,m。每个元素有两个值:wi,vi,要求从两个数组中分别选出一个子数组,使得两个子数组的wi和相同,并使总的vi之和最大。 数据范围:n,m<=1e3,wi<=1e3,vi<=1e9,\(\sum(n+m)<=1e4\) 解法: 很容易想到分别对两个 ...
分类:
其他好文 时间:
2020-07-31 18:01:31
阅读次数:
115
0、背景在当今世界,各行各业每天都有海量数据产生,为了从这些海量数据中获取想要的分析结果,需要对数据进行提取、转换,存储,维护,管理和分析。这已然远远超出了普通处理工具、数据库等的实现能力,只有基于的分布式架构和并行处理机制的大数据工具所才能实现这些功能。Elasticsearch是响应如前所述大多数用例的最热门的开源数据存储引擎之一。Elasticsearch是一种分布式数据存储和搜索引擎,具有
分类:
其他好文 时间:
2020-07-31 01:10:28
阅读次数:
62