迁移实战:Discourse 从 PostgreSQL 到 MySQL 到 TiDB丨AskTUG 论坛背后的故事

2021-06-25 11:04:09 浏览数 (1)

AskTUG.com 技术问答网站相信大家都不陌生,但除了日常熟知的前端页面外,背后支撑其运行的数据库还有一个不为人知的故事。本文由 AskTUG.com 的作者之一王兴宗老师分享,揭秘诞生于 Discourse 的 AskTUG.com ,从 PostgreSQL 迁移到 MySQL 最后稳定运行在 TiDB 的奇妙故事。

一个广告:

AskTUG.com 是 TiDB User、Contributor、合作伙伴的聚集地,在这里你可以找到所有 TiDB 相关问题的答案。欢迎大家注册体验~

链接:https://asktug.com/

背景

“通过一个平台,一定能找到 TiDB 所有问题的满意答案。”

因为这样的愿望,TiDB 生态中的用户、Contributor、合作伙伴一起建立了 AskTUG.com 技术问答网站,并于 2019 年 8 月正式公开上线。作为 TUG 成员学习、分享的“聚集地”,TiDB 用户可以在这里提出、解答问题,相互交流探讨,这里汇集 TiDB 用户的集体智慧。自上线以来,AskTUG.com 逐渐吸引了越来越多用户的关注,截止 2021 年 6 月底,AskTUG.com 已有 7000 注册用户,沉淀了 1.6w 问题和 300 技术文章。

很多小伙伴都已经发现,AskTUG.com 的后端程序是一个 Discourse 程序。关于 Discourse 是 Stack Overflow 的联合创始人 Jeff Atwood 推出的一个新的开源论坛项目,其目的是为了改变十年未变的论坛软件。在 AskTUG.com 建立之初,从以下几个角度确定使用 Discourse:

  • 功能强大:Discourse 特性丰富,可定制性强,是论坛界的 WordPress。与其他传统的论坛相比, Discourse 简化了传统论坛的分类,取而代之是热贴,这点有点像问答,它可以避免用户进入传统论坛后找不到方向的迷茫,这个特性从 AskTUG.com 的页面便可见一斑:
图片图片
  • 受众广泛程度:大部分流行的开源项目都选择使用 Discourse 来搭建自己的社区,包括:
代码语言:txt复制
-   Docker:https://forums.docker.com/
    
代码语言:txt复制
-   Github Atom:https://discuss.atom.io/
    
代码语言:txt复制
-   Mozilla:https://discourse.mozilla.org/
    
代码语言:txt复制
-   TiDB:https://asktug.com/
    
代码语言:txt复制
-   Discourse:https://meta.discourse.org/
    
代码语言:txt复制
-   Rust:https://users.rust-lang.org/
    
图片图片
    • 更多:https://discourse.org/customers
  • 易用性好:Discourse 的帖子是气泡形式展现,全部 Ajax 加载,有电脑和移动版,论坛采用了瀑布流的设计,自动加载下一页,无需手动翻页,简单来说这是一个很赞的系统。

为什么要迁移

到现在为止,Everything is Good,除了一点:Discourse 官方只支持 PostgreSQL 这一种数据库。

作为一家开源数据库厂商,我们有极大的热情和充分的理由让 AskTUG.com 跑在自己的数据库 TiDB 上,最初有这个想法时,当然是找有没有已经将 Discourse port 到 MySQL 的方案,结果是问的人多,行动的没有。

于是我们决定自己来做 Discourse 数据库改造这件事情。原因有二:

  • 吃自己的狗粮,验证 TiDB 的兼容性。
  • Discourse 是一个典型的 HTAP 型应用,它的管理后台有很复杂的报表查询,随着论坛数据量增加,单机 PostgreSQL、MySQL 都很容易出现性能瓶颈。TiDB 5.0 引入的 TiFlash MPP 计算模型正好满足了这种应用场景需求,通过引入 TiFlash 节点,对一些复杂的统计分析类查询做并行处理,达到加速的效果。并且不需要改动 SQL 和复杂的 ETL 流程。

迁移实践

前面我们讲述了做 AskTUG & Discourse 数据库改造项目的原因始末,接来下,则会细致地讲下从 PostgreSQL 迁移到 MySQL / TiDB 踩过的“坑”,如果有从 PG 迁移到 MySQL 的朋友可以拿来参考。

TiDB 同时兼容 MySQL 协议和生态,迁移便捷,运维成本极低。因此,Discourse 从 PG 迁移到 TiDB 大致分为两步

第一步:将 Discourse 迁移到 MySQL;

第二步:适配 TiDB。

Migrate to MySQL 5.7

0 人点赞