淘天集团面试题更新 2026-08-05
场景题:客户输入一个软件或网页界面截图,如何通过RAG的方式帮助用户了解界面的每一个组件作用?
淘天集团人工智能互联网/IT问题拆解系统设计技术选型RAG
考察说明
考察基于截图的多模态RAG系统设计与落地能力
回答思路
- 说明截图预处理与组件识别(OCR/目标检测/UI解析)流程
- 覆盖文本块切分、向量化与多模态嵌入的选型
- 阐述检索增强生成中查询构造与上下文融合思路
- 讨论组件间空间关系如何纳入检索与回答
- 考虑候选组件覆盖不全时的兜底与置信度提示
本题附完整参考答案与评分标准
登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。