文章详情页
mysql - 千万数据 分页,当偏移量 原来越大时,怎么优化速度
问题描述
以mysql为例,一般数据量比较大的时候,分页的话,偏移量约大,查询效率越低,
比如有某个帖子有200万评论,每页显示10条,就有20万页, 当取20万页,数据该怎么处理呢,有什么好的方法可以解决这种 需求呢,
实例: 网易音乐,单个歌曲最大评论数有140多万,分页速度处理的很好的,
问题解答
回答1:第一我相信網易音樂讀取數據的方式絕對是使用nosql,去讀取數據。當然假如你的數據表訪問頻率不高的話,還是可以直接讀取數據庫,當然mysql innodb庫有個坑爹的弱點,就是你查詢頁數越大,所以的效果就越小。所以一般我們是通過id去提高查詢的效果舊的查詢用法 limit 100000,10 建議查詢用法 where id > 100000 limit 10。這樣可以保證到索引的使用。當然你可以使用分錶的形式,降低單表數據,從而提高查詢效率
回答2:如果用redis的化应该是将id都存在list中,然后利用redis获得list的某个片段,然后拿片段里的ID到mysql去查询结果。
当然如果你要加上排序的话就没辙了。
排行榜