首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  Elasticsearch

怎么从 ES 中取出 20w 数据

  •  
  •   Evan0302 · 217 天前 · 1465 次点击
    这是一个创建于 217 天前的主题,其中的信息可能已经有所发展或是发生改变。
    8 回复  |  直到 2019-03-05 10:20:59 +08:00
        1
    Evan0302   217 天前
    最好一次性取出来
        2
    windfarer   217 天前 via Android
        3
    prolic   217 天前 via Android
    search after 还是 after search 来的
        4
    ClutchBear   216 天前
    es 我记得一次性最多取一万条.
    没法一次性的,
    只能用 scroll
        5
    qinxi   216 天前
    @ClutchBear 1W 是默认值 可以改
        6
    reself   216 天前 via Android
    @qinxi 不管是 1w 还是多少,search api 禁止深翻页。获取数据请用 scroll。
        7
    Evan0302   216 天前
    公司业务坑爹啊,之前用的 redis:keys。。。。
        8
    rmrdf   50 天前
    还是用 scroll 分页查询吧,20w 条 很快的
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   1802 人在线   最高记录 5043   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 16ms · UTC 16:27 · PVG 00:27 · LAX 09:27 · JFK 12:27
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1