KevinQi 最近的时间轴更新
KevinQi

KevinQi

V2EX 第 483623 号会员,加入于 2020-04-14 18:09:35 +08:00
KevinQi 最近回复了
我的,新鲜出炉 http://qiweiwei.cn
83 天前
回复了 qiyue0726 创建的主题 程序员 有什么能快速开发网站的框架或语言吗
若依,前端 vue ,后端 springboot
想请教一下您做 AI 的思路,想学习下,不知道可以分享下不?
@DigitalG 不太明白,AI 小白,现在只过了一遍 Huggingface 上的 Question Answering 任务的 colab 笔记。
我现在的想法是使用 HuggingFace 上的中文 QA 预训练模型,然后使用手里的文档资料数据进行微调,微调的步骤 Huggingface 上教程很清楚,但是如何使用纯文本 /pdf/exce 文档生成格式化的训练数据({question, context, answer: {answer_start, answer_text}}),一直没有找到工具和普遍的方法。目前就卡在了“无结构化文档 to Dateset”这一步了
@TimePPT 这篇检索到了,但是只有论文。
@TimePPT 我觉得从纯文本 /文件 /图片抽取信息做 QA 或者 Document QA 的训练数据集,或者更普遍的,“如何从无结资料构建 QA 数据?”,应该是训练 AI 的一个很普遍的步骤,为什么检索不到什么通用工具呢?是不是我检索的关键字不对啊,学术领域这个称呼是什么呢?
@DigitalG 未必是 QA 模型,目前想采用的 3 个,一个是 QA 模型,一个是 Document Question Answer 模型,还有一个是 Table Question Answering ,但是后面两个在 Huggingface 上都没有找到中文的相关模型,所以想着先试试 QA 模型,利用现有数据对某个中文模型进行微调训练。
@TimePPT 谢谢,纯的知识文档,大多是 excel ,还有 pdf 。
真的有移动需求吗?
2022-08-24 18:21:54 +08:00
回复了 yagamil 创建的主题 程序员 后端准备干全栈,前端部分有什么快速捷径
学 vue 吧,上手快
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   5895 人在线   最高记录 6543   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 18ms · UTC 02:14 · PVG 10:14 · LAX 19:14 · JFK 22:14
Developed with CodeLauncher
♥ Do have faith in what you're doing.