afx-team / afx-team/UI-UG

grounding任务的内容提取优化

未关闭
#3 1 条评论 0 个 reaction 已指派 0 人 在 GitHub 查看
主要语言
Python
星标
90
派生
8
PR 合并指标
30 天内没有已合并 PR

描述

hello,你们的工作与我们这边想法、思路及工作都非常一致,我认为你们的工作是GUI方向的重要基石,
当下我这边基于工程角度考虑,在grounding任务中,只需要model返回除了text外的其他有效元素,但是目前来看prompt控制能力较弱,无法控制模型的返回。
因为我这边认为,text可以通过OCR能力填充,icon等其他元素是当下的重要基石,可以看看如何提升这一点~

贡献指南

这个仓库没有索引到贡献指南

评估

这个 Issue 还没有评估数据。

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。