React 项目中 分库分表 的设计取舍
第一次在 React 项目里听到“分库分表”,我脑子是懵的。前端就负责画页面,数据库怎么分关我什么事?后来后台列表页越来越慢,接口动不动超时,后端说单表已经两千多万行了,不拆不行。拆完之后,React 这边也得跟着改。分页器对不上、筛选条件跨库、统计数字偶尔抽风,全是坑。下面就把我踩过的那些取舍记一下,不一定对,但至少都是实测踩出来的。
先搞清楚是谁在分、谁在查
分库分表这事儿,前端一般插不上嘴。后端按用户 ID 哈希、按时间分表、按业务线拆库,各有各的道理。但 React 项目里得先问一句:页面上的查询条件是什么?
比如一个后台订单列表,运营习惯按月份筛。后端按订单 ID 哈希拆了 16 张表,那就很痛苦,因为按月份查要扫所有表。反过来,后端按月分表,运营想按用户 ID 查最近半年的订单,又得跨多张表。所以 React 这边能做的取舍是:别让页面同时支持太多维度的筛选。
我们最后的做法是,把默认查询条件收敛到分片键上。列表页默认带一个月份范围,用户 ID 只做精确查询,不参与大范围模糊搜索。前端筛选面板里把“用户 ID”输入框放到高级筛选里,默认不展开,少给后端添乱。你说这样产品经理能同意吗?有时候能,有时候不能,那就得继续掰扯。
分页这个坑,前端得认
分库分表之后,count(*) 基本就废了。以前分页组件拿 total 算总页数,现在跨 16 张表去 count,慢得离谱。后端给了一个方案:不返回总条数,只返回“是否有下一页”。React 这边分页器就得从“第 1/23 页”改成“上一页 / 下一页”,最多显示一个当前页码。
一开始运营很不习惯,说看不到总数心里没底。后来加了个“约 2000+ 条”的模糊展示,用后端缓存的估算值,勉强糊弄过去。代码大概长这样:
const [page, setPage] = useState(1);
const [hasNext, setHasNext] = useState(false);
async function loadPage(nextPage) {
const res = await fetch(`/api/orders?page=${nextPage}&size=20`);
const data = await res.json();
setHasNext(data.hasNext);
setPage(nextPage);
}
分页组件里就别再算 totalPages 了,老老实实按游标或者页码加 hasNext 来。还有一个取舍:深分页直接砍掉。以前后台能跳到第 500 页,现在跨表 offset 太大,后端直接报错。前端把页码输入框藏了,只留上一页下一页,用户想翻到很后面就只能改筛选条件。虽然有点粗暴,但总比接口 30 秒超时强。
跨表查询别硬扛
React 页面里经常有那种联表展示,比如订单列表带用户昵称、商品名称。分库分表之后,订单表和用户表可能不在一个库,JOIN 不了。后端有两种做法:一是做宽表冗余,把用户昵称直接塞进订单表;二是让前端多调一次接口,拿到订单列表后再批量查用户。
我们选了后者,因为宽表同步太容易出问题,用户改个昵称还得回溯更新历史订单,想想就头大。React 这边就变成:
const orders = await fetchOrders();
const userIds = [...new Set(orders.map(o => o.userId))];
const users = await fetchUsersByIds(userIds);
const userMap = Object.fromEntries(users.map(u => [u.id, u]));
多一次请求,页面会闪一下,所以加了个骨架屏。取舍就是:宁可多一次接口,也不要把一致性维护压到数据库同步上。当然,如果这个页面 QPS 很高,那还是得让后端做冗余,前端只负责展示。没有绝对的对错,就看谁承担复杂度。
聚合统计尽量异步
后台首页经常有那种“今日订单总数”“本月销售额”的卡片。分库分表之后,实时聚合基本别想。我们试过让后端实时查,结果首页加载从 1 秒变成 8 秒,老板直接来问是不是服务器坏了。
后来改成异步统计,后端定时任务把结果写到一个单独的小表里,React 这边只查这个结果表。代价是数字有延迟,比如 5 分钟更新一次。前端在卡片上加了个“数据更新于 10:05”的小字,用户也就接受了。取舍很明确:实时性换响应速度。如果产品经理非要实时,那就得加钱上 ClickHouse 之类的,React 这边改个接口地址就行,但那是另一笔账了。
事务和前端状态
分库分表之后,跨库事务基本靠最终一致性。React 这边以前点个“提交订单”,等接口返回成功就完事。现在后端可能返回“处理中”,然后异步落库。前端就得处理中间状态:按钮置灰、轮询结果、超时提示。
我们做过一版乐观更新,点完按钮直接把订单加到列表里,结果后端事务回滚了,列表里多了一条不存在的订单,用户刷新后又没了,投诉了好几次。后来老老实实改成等待后端确认,虽然慢一点,但至少不会骗人。取舍就是:前端别替后端做太多乐观假设,尤其是分库分表这种一致性本来就弱的环境。
一个实际的路由配置
最后贴一个我们前端请求层的小配置,按查询条件决定走哪个接口,避免把跨库查询的压力全丢给后端:
const API_ROUTES = {
byMonth: '/api/orders/monthly',
byUser: '/api/orders/by-user',
byOrderNo: '/api/orders/detail',
};
function getOrderApi(filters) {
if (filters.orderNo) return API_ROUTES.byOrderNo;
if (filters.userId) return API_ROUTES.byUser;
return API_ROUTES.byMonth;
}
看着很土,但确实少了很多慢查询。React 项目里做分库分表的取舍,说到底就是一句话:前端多承担一点查询约束和状态展示的复杂度,后端少做一点跨库硬查。没有银弹,只有谁先扛不住。
评论
还没有评论。
发表评论
提交后评论将经过自动审核,审核通过后公开展示。