V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  kerie  ›  全部回复第 1 页 / 共 6 页
回复总数  120
1  2  3  4  5  6  
感谢各位 xdjm 的热心答复,我最终决定采纳 @t3zb2xzvjm4yvmn 的方案,大佬留下 vx ,我转你一杯咖啡的钱
@fuyufjh 感谢答复,你对 event-driven 的理解让我很有启发,单这个需求来看确实用数仓更合适一些,
@weakbd 也感谢你
@weakbd Flink 的时间属性和 join 语法理解有点困难,可以给个示例,我测试一把吗
@leonhao 谢谢,时序数据库虽然有物化视图功能,但时序数据库本身不能做监控报警,还是需要外部程序做定时查询,将聚合数据推送给监控报警系统。
@leonhao 数据都写到数据库,还是得一个额外的程序,每分钟做一次计算吧
@t3zb2xzvjm4yvmn 我研究一下,感谢!
@fuyufjh 大佬能讲一下用 Flink 具体怎么做吗
@David1119 我再挣扎下,新手感觉 Flink SQL 更直观一些,但如果实在做不了就放弃 SQL 的方案,转 DataStream API process function 。
@t3zb2xzvjm4yvmn 我感觉看到希望了,我的数据量不大,你知道如何粗暴的每分钟把维表的数据全量发到 flink ?
用 DataStream API ,你说的额外考虑的场景暂时不用考虑,我们是 IoT 设备,理论不会出现 1 分钟全部设备没有数据的情况,后续优化再额外每分钟加一些 mock 数据,强制触发窗口。
@sijue 1. 不行,需求就是监控哪些用户没有下订单(这里的场景我做了更改,实际是监控哪些 IoT 设备没有上传数据,我在主题里也 append 更新下)
2. 用户表是提前全量初始化好的,不考虑更新问题,用户表没有时间信息;订单表,理论每个用户每分钟都有数据。
@liprais 这里的`table function`指的是 udf (用户自定义函数)吗,不使用 udf 可以吗
@liprais 我用的 customers left join order_per_minute ,但不能统计出没有 order 的 customer
@sijue 对的,上面的 left join 是 regular join ,没有数据是因为 customer 表没有时间戳信息,它只是一个全量客户的表,没有带时间戳信息。
lookup join 有上面一样的问题,不能输出没有 order 数据的 customer 统计。
2023-03-13 15:10:09 +08:00
回复了 Mason2021 创建的主题 程序员 分享: Zed 编辑器邀请链接
2021-04-29 16:15:41 +08:00
回复了 randm 创建的主题 职场话题 今年 40 了今天试用期汇报通过提前转正
每个人都有到 40 岁的时候,感谢老哥分享,送上感谢!
2021-02-07 14:14:26 +08:00
回复了 Posh 创建的主题 问与答 全身麻醉是什么感觉?我现在好紧张
前天刚全麻,深度睡眠了半个小时,醒来感觉精神都好了
ScriptEngineManager 太重了,可以用 exp4j。
https://www.objecthunter.net/exp4j/
简历不是很重要,重要的是后面的发挥,准备差不多就可以发我了哈。
1  2  3  4  5  6  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2924 人在线   最高记录 6543   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 24ms · UTC 14:14 · PVG 22:14 · LAX 07:14 · JFK 10:14
Developed with CodeLauncher
♥ Do have faith in what you're doing.