首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  程序员

2 千万的 myisam 表,只对自增 id 进行分页,如何快速进行分页

  •  
  •   kisshere · 30 天前 · 994 次点击

    目前想用 php 动态输出网站 sitemap,而网站的网址形式都如 www。example。com/[数据库自增 id].html,所以只需要对数据库 primary key 进行分页,在 offset 比较小的情况下,query 时间很短,但是当 offset 很大的情况下(每个 sitemap 总共 500 条 URL ):

    SELECT id FROM MyTable ORDER BY id ASC LIMIT 19990000,500
    

    查询时间很长,像这种只涉及到自增 id 的大表分页,怎样快速进行分页?

    10 回复  |  直到 2019-03-26 17:52:57 +08:00
        1
    vicalloy   30 天前
    太老的页面直接不给查。
    分表。
        2
    lostvincent   30 天前
    关键词:late row lookup
        3
    jswh   30 天前
    offset 大的时候用 id > x 会比 limit 好一点
        4
    keepeye   30 天前
    select * from YOURTABLE where id > (select id from YOURTABLE limit OFFSET,SIZE)
        5
    sagaxu   30 天前 via Android
    https://explainextended.com/2011/02/11/late-row-lookups-innodb/

    只有 myisam 才有这个问题,pgsql 或者 innodb 没有这个坑
        6
    kisshere   30 天前
    @jswh 生成 sitemap 只能这种分页吧,不能游标分页
        7
    haiyang416   30 天前
    不要用 offset 来做了,把每次查询的最后一个 ID 作为分页依据。
        8
    snappyone   30 天前
    参考 4 楼子查询
        9
    opengps   30 天前
    这个情况,表分区特别合适
        10
    dongyu   30 天前
    用索引过滤
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   2066 人在线   最高记录 5043   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 18ms · UTC 16:09 · PVG 00:09 · LAX 09:09 · JFK 12:09
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1