远程连接需要在postgresql中建立用户，即spideruser用户，postgres是作为服务器登陆的用户来使用，同时需要设置postgresql.conf pg_hba.conf开通权限以及5432端口 ...
分类：
其他好文 时间：
2019-01-16 11:53:49
阅读次数：
144
几台号的X3850X5服务器VmwareVsphere，查了兼容性列表，此设备支持到6.0U3。安装完系统准备挂载后端DS5020存储的时候发现未识别到FC-HBA卡，重启进BIOS查看此卡IBM备件号：42C2069，实际为Emulex型号：LPe11000。官网显示ESXI6.0后已经停止对此卡的支持，在Vmware官方论坛中找到此卡驱动。安装几次均在重启后系统卡死。多次尝试后总结以下要点：1
分类：
其他好文 时间：
2019-01-16 01:02:22
阅读次数：
261
大数据时代，企业对于DBA也提出更高的需求。同时，NoSQL作为近几年新崛起的一门技术，也受到越来越多的关注。本文将基于个推SRA孟显耀先生所负责的DBA工作，和大数据运维相关经验，分享两大方向内容：一、公司在KV存储上的架构演进以及运维需要解决的问题；二、对NoSQL如何选型以及未来发展的一些思考 ...
分类：
数据库 时间：
2019-01-12 18:03:51
阅读次数：
235
<! TOC "说明" "安装" "配置" "启动" "网页效果" "一点废话" <! /TOC 本文介绍hbase集群配置 说明 安装 配置 1. hosts 2. hbase env.sh 3. regionservers 4. hbase site.xml 5. core site.xml 6 ...
分类：
其他好文 时间：
2018-12-31 21:12:07
阅读次数：
222
一：hbase的存储形式 hbase的内部使用KeyValue的形式存在，其key是有rowkey:family:column:logTime，value是其存储的内容。 其在region的是大多以升序的形式排列，唯一的是logtime是以降序的形式进行排列。 所以，按照越靠近左边的信息越容易被检索 ...
分类：
其他好文 时间：
2018-12-30 20:30:19
阅读次数：
159
ETL项目2:大数据清洗,处理:使用MapReduce进行离线数据分析并报表显示完整项目 思路同我之前的博客的思路 https://www.cnblogs.com/symkmk123/p/10197467.html 但是数据是从web访问的数据 avro第一次过滤 观察数据的格式,我们主要分析第四个 ...
分类：
其他好文 时间：
2018-12-29 21:13:48
阅读次数：
188
相信很多的用户在迁移上云上最头疼的是数据库备份和还原了吧。对于有些年头企业的数据可能很大，用数据库自带的dump工具备份导出又导入，在传输上耗时又费力。Bespin Global资深交付工程师张小娅将为您介绍一种离线数据同步工具DATAX，实现包括 MySQL、Oracle、SqlServer、Po ...
分类：
数据库 时间：
2018-12-28 12:02:55
阅读次数：
234
java.lang.RuntimeException: HRegionServer Aborted 当我们启动hbase集群的时候，刚启动时每个节点上的进程都显示正常，过一会其他两个节点上的HRegionServer自动挂掉 查看日志，报以上错误。 重新启动，马上又挂掉，想起刚刚添加了一个Copro ...
分类：
编程语言 时间：
2018-12-27 20:22:21
阅读次数：
243
On your Postgres server, you will need to update your pg_hba.conf file to allow access for the ambari user on the ambari database coming from 127.0.0. ...
分类：
数据库 时间：
2018-12-21 13:07:09
阅读次数：
386
flume安装: https://blog.csdn.net/u011254180/article/details/80000763 1 运行机制 1、 Flume分布式系统中最核心的角色是agent，flume采集系统就是由一个个agent所连接起来形成 2、每一个agent相当于一个数据传递员， ...
分类：
Web程序 时间：
2018-12-18 14:40:18
阅读次数：
257
