[Bug]: 6000个公众号就出现慢查询了

[zaojiahua]

服务版本

1.3.13

遇到的问题

026/01/01 22:22:19 AQiezxhj5gV/callbacks.go:134 SLOW SQL >= 200ms
[242.233ms] [rows:0] SELECT * FROM articles WHERE biz_id = xxx AND created > "2026-01-01 00:00:00" ORDER BY created DESC。6000个公众号不多吧，就报慢查询了，感觉没有加索引？另外，config.html页面中的订阅管理，订阅列表建议做分页，否则目前的数据能卡死。建议优化一下。目前的价格性价比已经很高了，能解决我说的问题，多付费也没问题。

期望的结果

1. 优化页面的分页。
2. 解决慢查询的问题。

日志

026/01/01 22:22:19 AQiezxhj5gV/callbacks.go:134 SLOW SQL >= 200ms
[242.233ms] [rows:0] SELECT * FROM articles WHERE biz_id = xxx AND created > "2026-01-01 00:00:00" ORDER BY created DESC。

[ttttmr]

这是api query查的吧，确实这里忘加了

6000个确实比我想象的多，下个版本带上分页

[ttttmr]

v1.4.3 修复了

[zaojiahua]

我们预计上万个公众号，数据量上去这块可以考虑一下。另外，还想请问一下，目前6000多个公众号，10个微信账号，经常被分控，根据您的经验，准备多少个账号能够。

[zaojiahua]

另外，想问一下，错误码517和502分别代表什么意思呢。

[ttttmr]

我们预计上万个公众号，数据量上去这块可以考虑一下。另外，还想请问一下，目前6000多个公众号，10个微信账号，经常被分控，根据您的经验，准备多少个账号能够。

这个量级我就没啥经验了

[ttttmr]

另外，想问一下，错误码517和502分别代表什么意思呢。

服务没有错误码，api响应的报错都在json body的err字段

[zaojiahua]

感谢回复，另外发现一个新的报错：time="2026-01-02T23:33:05+08:00" level=info msg="info json data: {"errcode":-2533,"errlog":"CEfw2wP","errmsg":"-2533"}"
time="2026-01-02T23:33:05+08:00" level=error msg="获取公众号[]信息失败，错误：unknown error: -2533"
time="2026-01-02T23:33:05+08:00" level=info msg="send msg: 获取公众号[]信息失败，错误：unknown error: -2533"。这个是什么意思呢。

[ttttmr]

感谢回复，另外发现一个新的报错：time="2026-01-02T23:33:05+08:00" level=info msg="info json data: {"errcode":-2533,"errlog":"CEfw2wP","errmsg":"-2533"}" time="2026-01-02T23:33:05+08:00" level=error msg="获取公众号[]信息失败，错误：unknown error: -2533" time="2026-01-02T23:33:05+08:00" level=info msg="send msg: 获取公众号[]信息失败，错误：unknown error: -2533"。这个是什么意思呢。

这是微信接口的问题，会直接抛出来，公众号发一下看看

[zaojiahua]

感谢回复，另外发现一个新的报错：time="2026-01-02T23:33:05+08:00" level=info msg="info json data: {"errcode":-2533,"errlog":"CEfw2wP","errmsg":"-2533"}" time="2026-01-02T23:33:05+08:00" level=error msg="获取公众号[]信息失败，错误：unknown error: -2533" time="2026-01-02T23:33:05+08:00" level=info msg="send msg: 获取公众号[]信息失败，错误：unknown error: -2533"。这个是什么意思呢。

这是微信接口的问题，会直接抛出来，公众号发一下看看

完整的错误是：check 2396413066"\n","stream":"stderr","time":"2026-01-02T14:45:46.358991994Z"}
{"log":"time="2026-01-02T22:45:46+08:00" level=info msg="info json data: {\"errcode\":-2533,\"errlog\":\"C0my3NJ\",\"errmsg\":\"-2533\"}"\n","stream":"stderr","time":"2026-01-02T14:45:46.427705155Z"}
{"log":"time="2026-01-02T22:45:46+08:00" level=error msg="获取公众号[]信息失败，错误：unknown error: -2533"\n","stream":"stderr","time":"2026-01-02T14:45:46.436527624Z"}
{"log":"time="2026-01-02T22:45:46+08:00" level=info msg="send msg: 获取公众号[]信息失败，错误：unknown error: -2533"\n","stream":"stderr","time":"2026-01-02T14:45:46.436552772Z"}
{"log":"time="2026-01-02T22:45:46+08:00" level=info msg="webhook resp: {\"errcode\":0,\"errmsg\":\"ok\"}"\n","stream":"stderr","time":"2026-01-02T14:45:46.74631647Z"}
{"log":"time="2026-01-02T22:45:46+08:00" level=error msg="get info: unknown error: -2533"\n","stream":"stderr","time":"2026-01-02T14:45:46.751695645Z"}。

[zaojiahua]

另外还有个问题，就是我升级了最新版本以后，确实是分页了，希望再加入一个页数跳转的功能。因为我们数据比较多，前边看到的全部是数字，我们有很多没有风控的号，但是我不确定到底有没有爬取新的公众号，前边很多全是数字，我找不到数字和文本的交界点，或者加个筛选功能也可以。方便我们快速定位问题。

[ttttmr]

跳转可以考虑加，新添加的队列处理需要点时间，这样的数据很多吗，前5页可以直接跳转，可以改单页数量，默认15，先改这个用吧

思考了一下目前单机可能有理论上限，超过5k可能就无法保证24小时内的时效了，后面我看看提高到1w吧

[zaojiahua]

跳转可以考虑加，新添加的队列处理需要点时间，这样的数据很多吗，前5页可以直接跳转，可以改单页数量，默认15，先改这个用吧

思考了一下目前单机可能有理论上限，超过5k可能就无法保证24小时内的时效了，后面我看看提高到1w吧

我刚才又仔细看了一下日志，我发现我们现在的这个数据量，好像就没有再监控公众号了，先check一个公众号的时候，给出来的都是-2533这个错误，也就是说，没法订阅更多的公众号了。目前订阅的也就2000多个，实际发给你的系统6000多个，这个问题希望早点解决一下，因为目前来看，这样的话无法满足业务要求。

[ttttmr]

感谢回复，另外发现一个新的报错：time="2026-01-02T23:33:05+08:00" level=info msg="info json data: {"errcode":-2533,"errlog":"CEfw2wP","errmsg":"-2533"}" time="2026-01-02T23:33:05+08:00" level=error msg="获取公众号[]信息失败，错误：unknown error: -2533" time="2026-01-02T23:33:05+08:00" level=info msg="send msg: 获取公众号[]信息失败，错误：unknown error: -2533"。这个是什么意思呢。

这是微信接口的问题，会直接抛出来，公众号发一下看看

完整的错误是：check 2396413066"\n","stream":"stderr","time":"2026-01-02T14:45:46.358991994Z"} {"log":"time="2026-01-02T22:45:46+08:00" level=info msg="info json data: {"errcode":-2533,"errlog":"C0my3NJ","errmsg":"-2533"}"\n","stream":"stderr","time":"2026-01-02T14:45:46.427705155Z"} {"log":"time="2026-01-02T22:45:46+08:00" level=error msg="获取公众号[]信息失败，错误：unknown error: -2533"\n","stream":"stderr","time":"2026-01-02T14:45:46.436527624Z"} {"log":"time="2026-01-02T22:45:46+08:00" level=info msg="send msg: 获取公众号[]信息失败，错误：unknown error: -2533"\n","stream":"stderr","time":"2026-01-02T14:45:46.436552772Z"} {"log":"time="2026-01-02T22:45:46+08:00" level=info msg="webhook resp: {"errcode":0,"errmsg":"ok"}"\n","stream":"stderr","time":"2026-01-02T14:45:46.74631647Z"} {"log":"time="2026-01-02T22:45:46+08:00" level=error msg="get info: unknown error: -2533"\n","stream":"stderr","time":"2026-01-02T14:45:46.751695645Z"}。

2533这个可能是公众号注销了，或者不存在，目前会导致卡在这里重试，所以后续队列也没更新，下个版本会自动暂停跳过这个公众号

[ttttmr]

v1.4.4 修复了2533和上限问题，加了跳页