TenDB 1.4 InnoDB透明列压缩方案

TenDB 1.4 InnoDB透明列压缩方案
腾讯游戏风雨十年,一直致力于带给玩家最好的快乐体验,为此也取得了巨大的成功。腾讯游戏的后台数据库一直守护着亿万玩家的数据,提供着稳定透明的服务。 腾讯后台数据库大部分使用的是MySQL数据库,现已大部分被替换为互娱DBA团队自己定制的TenDB。IO问题是传统关系型数据库中最热门话题,互娱DBA团队在业务处理过程中同样遇到类似问题。 案例一:IO问题。DNF某个大区的DB由于数据量过大,数据量远大于内...

为MySQL源码添加变长动态数组

为MySQL源码添加变长动态数组
【现状】 MySQL 5.5社区版中已经有一种叫DYNAMIC_ARRAY的数据结构,是一种存储定长元素的动态数组。“定长”说的是数组中每一个元素所占字节数在运行时是恒定不变的;“动态”说的是这个数组的个数可以随着元素的增加而自动扩容。 先来看一下动态数组成员结构: [cpp] typedef struct st_dynamic_array { uchar *buffer; /* 内存首地址 */ uint elements; /* 元素个数 */ uint max_element; /* 是否需要扩容的...

基于Xtrabackup的物理备份解决方案预研

基于Xtrabackup的物理备份解决方案预研
【预研背景】 马年伊始,TenDB开发团队发布了dbbackup v2.0.5。作为TenDB逻辑备份解决方案的一次升级,新版dbbackup除了增加对binary字符集备份的支持外,通过在备份过程中拆分大单表的方法,进一步加强大表在恢复时的并发性,从而极大缩减备份介质在恢复时所需时间。dbbackup v2.0.5目前覆盖42项业务,652个实例。 对于例如XYZ广东1区这样大数据业务,虽然dbbackup v2.0.5将恢复时间从20小时减少到7小时,...

TenDB单表并行恢复工具发布

TenDB单表并行恢复工具发布
【项目背景】 TenDB开发团队对大表拆分备份、并行恢复的方案进行可行性分析,并对收益进行评测,详情请猛戳这里:TenDB单表并行恢复方案评测 (以下简称“评测”)。 目前,单表并行恢复方案已经完整实现,并在xxx广东1区及若干小业务中完成灰度;与此同时,本版本还提供了对binary备份的支持,让字符集问题不再吓坏我们的小伙伴。 【项目收益】 xxx广东1区数据并发导入所需时间由原先的18.7小时缩短到7.1小...

TenDB单表并行恢复方案评测

TenDB单表并行恢复方案评测
【概述】 本周分别在Z3和A5两台机器,对xxx_china_gd1.postal这张112G大表进行拆分恢复试验。期望通过并发恢复大表,提升大表恢复性能。观察并发导入引起的附加变化是否满足业务需求,进而对TenDB的tmysqldump增加单表并行恢复功能的可行性进行评估。 【背景】 目前xxx广东一区最大的两个表:postal表112G & charac_action_point表71G。TenDB1.4已经支持多线程并发导入多个表,但单表导入依然是在一个...
Copyright © 腾讯游戏DBA团队 保留所有权利.  

用户登录

分享到: