我用过 milvus 和 lancedb ，milvus 功能比较全面，lancedb python api 方便，适合快速开发小 deme 做测试用

@whileFalse 我理解的数据湖差不多就是这样，现在想自己部署一个，不然总有点知其表不知其里。

@jiangbao888 谢谢了，这是个好东西，我部署一下试试

@VermouthcZzz 谢谢，好文章。

这个题目是甲方给的，导师也不懂，没安排和甲方沟通，让我在这想方案。s3/hdfs 是我自己琢磨的，我看数据湖一般会有一个存储系统，可以用来放非结构化数据和查询系统的数据。rag 和向量数据库、图数据库有关系，但感觉这些查询系统放在湖里面有点强行了。

@ZGame 只是用现成的大模型，我也不会微调什么的

@hero1874 谢谢哥，我去看看

@opengps 我的理解是数据湖要有个持久化的存储系统，可以是对象存储，也可以是 hdfs 这种

@deorth 哈哈哈是这样的，导师也不懂

@yjhatfdu2 我也没搞清楚，现在想的是能不能把 Text2SQL 用在湖上一些查询系统上，类似于这种 https://help.aliyun.com/zh/dms/release-the-ai-agent

@dog82 好的，谢谢哥