跨任务迁移与多模态学习：LLaVA-NeXT-Interleave的多图像场景研究

2.9k字   |   预计阅读时长: 10min

这篇文章的主要贡献是介绍了LLaVA-NeXT-Interleave模型，该模型旨在解决多模态模型在多图像（multi-image）、多帧（视频）、3D场景和单图像任务上的通用适应性。其核心创新在于提出一种交错（interleave）数据格式，使模型能够在多种视觉任务间灵活适应，并实现跨任务的迁移能力。

展开全文 >>

自驾车事故推理理解：AdVersa-SD与MM-AU数据集解析

3.2k字   |   预计阅读时长: 10min

本篇笔记解析了论文《Abductive Ego-View Accident Video Understanding for Safe Driving Perception》的核心内容，重点介绍了自驾车事故视频理解领域的最新进展，包括 MM-AU 数据集的构建、基于 AdVersa-SD 框架的事故原因推理方法，以及如何利用视频与文本的多模态数据，推断和预测潜在事故。

展开全文 >>

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置： 

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true

北京邮电大学计算机科学与技术在读<br>联系:WilliamZH29@outlook.com