MyRocks在网易的应用

日期:2020-12-06 08:09:09   来源:互联网   编辑:小狐   阅读人数:329

主题:MyRocks在使用和优化实践

大纲:

1. 企业选择一种新型数据库,从0到1的实践过程中经过哪些阶段会更稳妥

2. MyRocks在的应用,会带来哪些优势

3. MyRocks和传统的InnoDB相比,需要配置哪些周边工具

4. 相比INNODB,MyRocks更适用哪些场景

5. MyRocks的高可用方案,王老师更推荐哪种

MyRocks在网易的应用(图1)

MyRocks在网易的应用(图2)

听说3306π要搞事情了

是啊,马上要搞3306π深圳站了

MyRocks在网易的应用(图3)

MyRocks在网易的应用(图4)

啊,是吗?哪天啊,在哪里办,怎么报名?

MyRocks在网易的应用(图5)

嘉宾自我介绍

MyRocks在网易的应用(图6)

数据库内核工程师杭州研究院数据库内核工程师,4年数据库技术经验,为传媒、音乐等业务数据库性能、稳定性与可靠性的支撑,擅长 myrocks/innodb 存储引擎,专注数据库及存储领域,喜欢探究底层原理,相信源码之前了无秘密。

MyRocks在网易的应用(图7)

我介绍一下MyRocks 在内部从0到1落地的过程,供大家参考。业务需要选择一种新型数据库,通常来说是现有的数据库在某些方面存在痛点了,比如云音乐的实时推荐场景,这是MyRocks落地的一个比较重要的场景。该场景写流量很大,RT 敏感。首先考虑的是LSM 模型的数据库,比如pika,myrocks,hbase。除了满足性能要求之外,稳定性、后续的运维难度、和公司其他组件的兼容程度这几个方面也是需要考虑的。实际性能下来MyRocks 性能满足需要,并且属于MySQL生态,运维上手快,DDB(内部中间件)以及binlog复制都可以继续使用。基于内核组对MyRocks充分的稳定性和异常模拟,业务最终选择了MyRocks。

请问王老师,MyRocks在的应用,会带来哪些优势呢?

节省存储成本是其一大优势,以传媒某业务为例,业务之前使用RDS,表中存有longtext类型的字段且数据量较大,RDS最大规格为2T,按数据增长量,已不能满足需求。当时可供于选择的有两种解决方案,分别为MyRocks和DDB(内部中间件)由于阿波罗业务数据库使用场景多为等值查询,最终考虑资源及DDB业务还需要在一定程度上变更使用姿势,符合Myrocks大数据量高压缩比及读性能也能满足业务需要,最终选择了Myrocks, 磁盘空间占用由1.8T降至630G,节省了很多存储成本。

MyRocks和传统的InnoDB相比,需要配置哪些周边工具吗?

在MySQL 5.7 上适配的MyRocks,目前还缺少物理备份恢复工具,Percona 在 8.0 版本xtrabackup 才支持备份MyRocks。Facebook 5.6 版本一个myrocks_hotbackup python 脚本工具,但是这个工具在5.7上使用存在问题,内部是在xtrabackup 2.4.8上适配了MyRocks 的备份恢复。

MyRocks发展已经比较成熟,相比INNODB,MyRocks更适用哪些场景呢?

MyRocks 在内部主要应用在以下场景,供大家参考:

i. 推荐类场景,这类业务通常写流量很大,并且数据量还不小,RT 敏感,用Redis成本太高,这类场景可以考虑使用MyRocks。

ii. 大数据量场景,这类业务通常是一些历史数据,数据量非常大并且增长很快,原来可能用innodb 存储,成本比较高,而且经常需要扩容,运维成本也高,这类场景适合MyRocks。

MyMyRocks的高可用方案,王老师更推荐哪种呢?

MyRocks 其实上层还是 MySQL嘛,因此基于binlog 的异步、半同步复制依然可以继续使用,内部还适配了MGR for myrocks ,也可以作为一个方案。

MyRocks在网易的应用(图8)

扫码报名

参与活动

学习新技能

赢取罗小波新书《MySQL复制技术和生产实践》和爱可生精美杯子

活动规则

写下您对本次活动的建议

或是想向嘉宾提出的问题

赠送

二者任选其一

围绕MySQL核心技术,将互联网行业中最重要的数据化解决方案带到传统行业中;囊括其他开源技术RadonDB、ClickHouse、Redis、MongoDB、Hbase、Hadoop、ElasticSearch、Storm、Spark等;干货知识,即便是赞助商,也要求如此,拒绝放水

本文相关词条概念解析:

场景

现代动画场景指的是影视动画角色活动与表演的场合与环境。这个场合与环境既有单个镜头空间与景物的设计,也包含多个相连镜头所形成的时间要素。动画艺术是时间与空间的艺术,是影视艺术的一个分支,动画场景的设计无不打上影视艺术的烙印。

网友评论
相关阅读
的菊苣咖啡,较为神秘的是在地球的另一端

的菊苣咖啡,较为神秘的是在地球的另一端

越南咖啡,众所周知是糖尿病者需要远离之物。而在美国新奥尔良,

裙子的边缘包含着搭配的浪漫情怀,成为老人们最喜欢的小辈穿搭,不如将时尚指数交给时髦精做主

裙子的边缘包含着搭配的浪漫情怀,成为老人们最喜欢的小辈穿搭,不如将时尚指数交给时髦精做主

随着寒冬天气越来越持久,羽绒服几乎已经成了“半永久式”的单品

趣味地理,可以简记为,在我们站的地球另一面的人是怎样站的

趣味地理,可以简记为,在我们站的地球另一面的人是怎样站的

1.下硬雨从前,有两个人从没见过下冰雹,一天,天空忽然下了一

每只猪身上只有一个,最重要的是每只猪的身上只有一个,所以一些卖猪肉的老板他们从来不吃

每只猪身上只有一个,最重要的是每只猪的身上只有一个,所以一些卖猪肉的老板他们从来不吃

猪身上这个部位最为昂贵,每只猪身上只有一个,猪肉老板从不吃!

梅花五章贺首届南天湖梅花诗词文化节开幕,熊东遨 , 文学看台2032

梅花五章贺首届南天湖梅花诗词文化节开幕,熊东遨 , 文学看台2032

..............................

北京新增3例本土确诊 均在大兴真相是什么?北京新增3例本土确诊 均在大兴令人震惊

北京新增3例本土确诊 均在大兴真相是什么?北京新增3例本土确诊 均在大兴令人震惊

辽宁沈阳发布3例新增本土确诊病例行程轨迹中新网1月4日电 据

咖啡粉粗细如何改变风味,开始调整研磨

咖啡粉粗细如何改变风味,开始调整研磨

喝咖啡,大家都希望能喝到顺口的,具有香气及绵长余韵的咖啡。但

31省新增确诊107例 本土90例意味着什么?31省新增确诊107例 本土90例令人震惊

31省新增确诊107例 本土90例意味着什么?31省新增确诊107例 本土90例令人震惊

“零报告”追踪:31省区市新增确诊11例 其中本土6例均在北

正如这一组日式甜点和菓子晒图的走红,造型精致,设计唯美,网友,真的令人舍不得下口

正如这一组日式甜点和菓子晒图的走红,造型精致,设计唯美,网友,真的令人舍不得下口

她们说,酸甜苦辣是生活的本来滋味,正是因为深谙人生的不易,所

儿童应该吃它作为钙的补充,他还可以提高他们的免疫力,特别开胃,要常吃

儿童应该吃它作为钙的补充,他还可以提高他们的免疫力,特别开胃,要常吃

现在很多家长选择用钙片给孩子补钙,其实,小钙片效果有限,效果