汽車之家 818 TiDB 集群整體架構(gòu)圖

• 本次 818 項(xiàng)目中，汽車之家使用了 TiDB 最新的版本 5.1.1，MySQL 的版本是 Percona 5.7.25；
• TiFlash 是 TiDB HTAP 形態(tài)的關(guān)鍵組件，它是 TiKV 的列存擴(kuò)展，主要用于 OLAP 業(yè)務(wù)。TiFlash 跨區(qū)部署提高容災(zāi)能力，汽車之家利用 TiFlash 解決統(tǒng)計(jì)分析類的 SQL，實(shí)時(shí)展示在大屏；
• TiCDC 是一款通過(guò)拉取 TiKV 變更日志實(shí)現(xiàn)的 TiDB 增量數(shù)據(jù)同步工具，具有將數(shù)據(jù)還原到與上游任意 TSO 一致狀態(tài)的能力，支持其他系統(tǒng)訂閱數(shù)據(jù)變更。 TiCDC 跨區(qū)部署， 將 TiDB 集群數(shù)據(jù)實(shí)時(shí)同步至下游的 MySQL 數(shù)據(jù)庫(kù)，作為故障應(yīng)急的備份，實(shí)現(xiàn)業(yè)務(wù)容災(zāi)能力的提升；
• MySQL 跨區(qū)部署主從，作為 TiDB 集群的應(yīng)急、降級(jí)之用，實(shí)現(xiàn)業(yè)務(wù)容災(zāi)能力的提升。

數(shù)據(jù)庫(kù)壓測(cè)

在 818 活動(dòng)前，數(shù)據(jù)庫(kù)團(tuán)隊(duì)聯(lián)合業(yè)務(wù)方一起做了一輪一輪嚴(yán)格的故障演練壓測(cè)，確保后端的高可用。

陶會(huì)祥透露，汽車之家的故障演練分為多種，光數(shù)據(jù)庫(kù)就會(huì)演練主庫(kù)故障和機(jī)房故障，一共做了三輪。每一輪測(cè)試中 TiDB 的表現(xiàn)都非常優(yōu)秀，KV 故障基本在幾十秒，只需 20 秒即可恢復(fù)，即使機(jī)房故障也能在一分鐘之內(nèi)進(jìn)行自動(dòng)切換。

為了保障活動(dòng)平穩(wěn)支撐，PingCAP 社區(qū)技術(shù)專家連續(xù)三年為汽車之家提供了社區(qū)技術(shù)支持。在今年的壓測(cè)環(huán)節(jié)中，社區(qū)技術(shù)專家與汽車之家 DBA 一起完成了調(diào)優(yōu)，良好地解決了寫入熱點(diǎn)問(wèn)題，將性能翻了好幾倍。最終在 818 高峰時(shí)期，TiDB 順利支撐了晚會(huì)期間 APP 用戶 9048 萬(wàn)次互動(dòng)，并抗住了最大每秒 40 萬(wàn)行的寫入，SQL 99 穩(wěn)定在 30ms 以下。TiCDC 性能表現(xiàn)也十分強(qiáng)勁，向下游 MySQL 同步速度高達(dá) 13 萬(wàn)行每秒 。跨中心的 TiFlash MPP 架構(gòu)，為大屏近實(shí)時(shí)展示助力總次數(shù)、秒殺和搖獎(jiǎng)的每輪參與用戶等信息提供了強(qiáng)有力的支撐。

陶會(huì)祥都對(duì)大促中 TiDB 的表現(xiàn)給予十分高的評(píng)價(jià)：TiDB 在這種十億以上的數(shù)據(jù)量級(jí)場(chǎng)景下是非常適合的，一是 TiDB 的分析能力是實(shí)時(shí)的，二是 TiDB 的數(shù)據(jù)存儲(chǔ)能力比傳統(tǒng)數(shù)據(jù)庫(kù)，如 SQL Server 之類強(qiáng)太多。 TiDB 結(jié)合了傳統(tǒng)數(shù)倉(cāng)和傳統(tǒng)關(guān)系型數(shù)據(jù)庫(kù)的優(yōu)點(diǎn)，非常適合應(yīng)用在大促這種量級(jí)的業(yè)務(wù)環(huán)境。

未來(lái)規(guī)劃

汽車之家的數(shù)據(jù)庫(kù)團(tuán)隊(duì)在本次 818 大促中，也總結(jié)出了非常多的最佳實(shí)踐：

• 如同城三中心五副本架構(gòu)，機(jī)房之間延遲應(yīng)當(dāng)盡量小，最好控制在 2ms 以內(nèi)；
• OLTP 的業(yè)務(wù)，通常壓測(cè)瓶頸在于 TiKV 的磁盤 IO 上，對(duì)于普通 SSD ，可以做成 RAID0 來(lái)提升 IOPS；
• 一旦某個(gè)可用區(qū)整體故障，正常不需要手動(dòng)干預(yù)，但是為了避免性能下降嚴(yán)重，建議手動(dòng)將五副本調(diào)整為三副本；
• 合理設(shè)計(jì)表結(jié)構(gòu)和索引，盡量避免熱點(diǎn)問(wèn)題，和業(yè)務(wù)一起做好充分壓測(cè)，壓測(cè)期間盡早發(fā)現(xiàn)問(wèn)題并優(yōu)化。

基于本次活動(dòng)中的良好表現(xiàn)，陶會(huì)祥表示，汽車之家接下來(lái)還會(huì)在更多業(yè)務(wù)中推進(jìn) TiDB 上線。比如以前汽車之家的很多數(shù)據(jù)會(huì)跑在 Hive 里，需要到第二天才能知道昨天發(fā)生了什么事。如果應(yīng)用 TiDB ，可以針對(duì)運(yùn)營(yíng)需要的用戶數(shù)據(jù)、業(yè)務(wù)指標(biāo)的分析，去做秒級(jí)的準(zhǔn)實(shí)時(shí)推送，預(yù)計(jì)能夠?qū)⑦@一時(shí)間壓縮到 5-10秒。業(yè)務(wù)方可以立即知道上一刻用戶有什么變化，數(shù)據(jù)有什么更新。

songjy