码迷,mamicode.com
首页 > 其他好文 > 详细

hbase 异常记录

时间:2020-11-18 12:27:59      阅读:7      评论:0      收藏:0      [点我收藏+]

标签:开启   并发   com   目标   内存不足   ase   shell   加载   shel   

1、进入hbase shell 报内存不足

  • 描述
    做hbase数据迁移的时候,需要在目标集群创建与源端集群相同的表以及表属性,同时通过bulkload的方式加载数据。
    目前迁移开启十个并发,一共迁移4千张表,失败了200+表的迁移。
    看来这种迁移还是不能起太多并发,否则导致hbase regionserver在加载数据的时候,报内存不足的问题
  • 报错信息如下:
    技术图片

不能分配内存

  • 解决
    清空缓存
echo 1 > /proc/sys/vm/overcommit_memory:问题解决

hbase 异常记录

标签:开启   并发   com   目标   内存不足   ase   shell   加载   shel   

原文地址:https://www.cnblogs.com/yjt1993/p/13963364.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!