Minieye 车舱VLM 💡 任务 任务主要包含舱内感知和舱外感知两种任务，具体来说，舱内和舱外感知都会有很多子任务，比如说，舱内就包含人物的基础属性（性别，年龄，位置，动作，衣着等），遗落物体，宠物等等；舱外又包含天气，道路情况，停车后周围环境等。 数据 数据包含不同阶段的数据处理，pretrain，sft，rl pretrain数据：大部分为为Caption数据，用来训练模型的图文知识，也包含一些文本数据，为了防止模型的语言能力遗忘问题 sft数据：这部分数据就包含了多种任务，包含caption、ocr、grounding、gqa、text、多轮对话等，也包含 了大量的内部数据，主要为舱内和舱外的感知对话数据 RL数据：这部分为两种数据 一种是偏好数据集用于DPO训练，另外一种是pro...