news 2026/11/2 5:28:40

GBase 8a 参数gcluster_shrink_to_rebalance使用介绍

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
GBase 8a 参数gcluster_shrink_to_rebalance使用介绍

参数功能

控制shrink操作使用rebalance方式的开关。
取值 0:关闭 shrink to rebalance 功能;
取值 1: 打开 shrink to rebalance 功能;
默认取值:1。

原理特性

  • 该参数为862-Build43后的新功能。
    打开该参数,执行 alter table t1 shrink space full或者 alter table t1 shrink space full block_reuse_ratio=命令时走 rebalance 逻辑。
    可以提升 shrink space性能,不阻塞 insert select、load 等 append only 类型的 DML 操作,支持对 rebalance 中的表的DQL。
  • rebalance操作步骤:
    1)创建中间表
    2)使用 SIS 把原表数据转存到中间表
    3)删除原表,
    4)rename 中间表
  • rebalance相关参数:
    gcluster_rebalancing_parallel_degree 重分布并行度,默认值4
    gcluster_rebalancing_step 重分布一批次的记录数,默认值1亿
    gcluster_rebalancing_immediate_recover_internal_table
    0(0FF):rebalance操作处于"Move data to inter table"状态时与gcrecover恢复rebalance中间表操作互斥;
    1(0N):rebalance操作处于"Move data to inter table"状态时与gcrecover恢复rebalance中间表操作可以并发;
    默认值OFF;
  • 支持Failover:
    1) 在创建中间表、使用SIS把原表数据转存到中间表 这两个步骤时宕机,其他gc接管后回滚到初始状态。
    2) 在删除原表,rename中间表为原表步骤宕机,其他gc接管后继续完成。

场景举例

某省移动集市集群(V862-Build33)

  • 业务特点:
    数据及并发统计分析业务量很大,存储及磁盘IO长期存在瓶颈,存储空间紧张,通过shrink full回收空间需求强烈。定期(每天晚上)批量执行shrink space full操作回收空间(集群版本V862-Build33,不支持shrink to rebalance)。
  • 原有模式shrink full存在问题:
    1)客户并发业务量大时,同时进行多表shrink space full操作,出现磁盘IO瓶颈,严重时甚至主机夯死。
    2)某些字段数很大的表(字段数很多,比如超过几百个),单独做shrink space full操作,也有可能出现上述异常。
  • 问题分析:

可能与旧模式shrink操作消耗较大IO资源有关,目前可采取做法包括:错峰执行shrink full、降低并发数或是改为非full方式shink。

更好的方式,采用shrink_to_rebalance对IO资源做精细化控制:
gcluster_rebalancing_parallel_degree 重分布并行度
gcluster_rebalancing_step 重分布一批次的记录数
将上述参数设置为较小的值,降低处理速度,降低IO资源的占用,同时规避shrink与其他追加写入操作的冲突。

使用示例

测试集群:V952.46,12节点

  • 试内容:对10亿级表进行shrink space full,对并行度、步长参数进行效果验证。
    默认参数:耗时11秒

  • 将并行度、步长参数设置为一半:耗时18秒

评论

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/10/30 20:49:38

MATLAB图像增强:开启视觉盛宴之旅

MATLAB图像增强代码 代码些许复杂,由本人一个朋友编写 是机器视觉和图像增强领域的应用,有gui界面,可以载入原图和参照强化的图像,读取参照图像的RGB或者HSV 分量,并强化原图像, 运行,corrction…

作者头像 李华
网站建设 2026/10/30 20:49:38

基于SpringBoot的爱心商城系统毕业设计源码

博主介绍:✌ 专注于Java,python,✌关注✌私信我✌具体的问题,我会尽力帮助你。一、研究目的本研究旨在设计并实现一个基于SpringBoot框架的爱心商城系统,以满足现代电子商务领域对于高效、安全、易用的在线购物平台的需求。具体研究目的如下&…

作者头像 李华
网站建设 2026/11/2 1:17:01

基于SpringBoot的甘肃旅游服务平台毕业设计源码

博主介绍:✌ 专注于Java,python,✌关注✌私信我✌具体的问题,我会尽力帮助你。一、研究目的本研究旨在构建一个基于SpringBoot框架的甘肃旅游服务平台,以实现甘肃旅游资源的数字化管理和智能化服务。具体研究目的如下:提高甘肃旅游…

作者头像 李华
网站建设 2026/11/2 4:09:01

【dz-1008】基于单片机的环境监测系统设计

摘要 随着人们对生活环境质量关注度的不断提升,对环境参数的精准监测与及时预警变得尤为重要。传统的环境监测方式多依赖人工采样和实验室分析,不仅耗时费力、响应滞后,还存在数据获取不及时、监测范围有限等问题,难以满足实时、…

作者头像 李华
网站建设 2026/10/31 6:30:05

【dz-1012】小型无士栽培自动控制系统设计与实现

摘要 在无土栽培领域,环境参数与营养液状态的精准调控对作物生长质量与产量起着决定性作用。传统无土栽培管理多依赖人工巡检和经验调节,存在参数控制滞后、营养液配比失衡、资源浪费等问题,难以满足精细化种植的严苛需求。 基于 STM32F103…

作者头像 李华
网站建设 2026/11/1 5:56:30

绿色工厂与上市公司匹配数据(2017-2023)

1729顶刊收割机!绿色工厂与上市公司匹配数据(2017-2023)数据简介2016年工业和信息化部(以下简称工信部)启动了第一批绿色制造体系示范建设项目,该项目涵盖绿色工厂、绿色产品、绿色园区、绿色供应链等多方面…

作者头像 李华