AI-modeller
Tillbaka
Alibaba (Qwen, Wan, Tongyi)
Alibaba (Qwen, Wan, Tongyi) Modell Öppna vikter

ClinFusion

En öppen medicinsk AI-modell från Alibaba DAMO Academy som förstår både vanliga 2D-bilder och 3D-volymer som datortomografi, skriver röntgenutlåtanden och svarar på medicinska frågor.

  • Medicin & hälsa
  • Bildförståelse
  • Multimodal
DAMO Academys jämförelse på multimodala och textbaserade medicinska tester 1 / 2

DAMO Academys jämförelse på multimodala och textbaserade medicinska tester [1]

Om ClinFusion[1][2][3]

ClinFusion är en multimodal språkmodell byggd för medicin, där bildförståelsen står i centrum. Den kan läsa 2D-bilder som röntgen och mikroskopibilder och även hela 3D-volymer från datortomografi (i formatet NIfTI), svara på frågor om bilderna, skriva utlåtanden, följa detaljerade instruktioner och lösa rent textbaserade medicinska uppgifter. Den kan också kopplas ihop med verktyg och sökning för mer agentiska kliniska arbetsflöden.

Modellen finns i två storlekar, ClinFusion-8B och ClinFusion-32B, som bygger på Qwen3-VL-8B-Instruct respektive Qwen3-VL-32B-Instruct. Nytt är en sammansatt bildkodare där DINOv2 och en ConvNeXt-baserad CLIP-modell kombineras med en teknik som forskarna kallar Cascade Spatial-Aware Locality Fusion, så att samma kodare klarar både 2D och 3D.

Teamet har också byggt ett eget utvärderingsramverk: MedIF-Bench för instruktionsföljning och en metod som bedömer utlåtanden utifrån de bildområden de handlar om. Enligt DAMO Academy slår ClinFusion andra öppna medicinska modeller som Hulu-Med och Lingshu på 20 av 24 tester och är bättre än GPT-5.2 och Gemini-3-Flash på 13 av 16 multimodala tester. I en blindad jämförelse rankade specialistläkare i radiologi ClinFusions utlåtanden högst.

Kod, vikter och en webbdemo av 8B-modellen släpptes den 28 juli 2026 under Apache 2.0-licens, och hela utvärderingsdatan (211 000 poster från 22 medicinska tester) kom den 16 augusti. Modellen är ett forskningsverktyg och inte godkänd för klinisk användning.

Det viktigaste[1][2]

  • Förstår både 2D-bilder och 3D-volymer från datortomografi med samma bildkodare.
  • Enligt DAMO Academy bättre än Hulu-Med och Lingshu på 20 av 24 medicinska tester.
  • Enligt DAMO Academy bättre än GPT-5.2 och Gemini-3-Flash på 13 av 16 multimodala tester.
  • Specialister i radiologi rankade dess utlåtanden högst i en blindad utvärdering, enligt artikeln.
  • Öppna vikter i 8B och 32B under Apache 2.0, plus öppen utvärderingsdata.

Källor

  1. [1]
    ClinFusion: A Vision-Centric Multimodal LLM System for Holistic Medical Understanding ↗
    Alibaba DAMO Academy (GitHub) Officiell sida github.com
    Publicerad okänt datum Läst 25 okt 2026
  2. [3]
    WeatherNext, Xiaomi Robotics, Qwen 3.8, Wan Animate 2, SymphonyGen: AI NEWS ↗
    AI Search Nyhetsbrev aisearch.substack.com
    Publicerad 9 aug 2026 Läst 25 okt 2026
  3. [2]
    ClinFusion: A Vision-Centric Multimodal LLM System for Holistic Medical Understanding ↗
    arXiv Forskningsartikel arxiv.org
    Publicerad 27 jul 2026 Läst 25 okt 2026

Historik

  1. 25 okt 2026
    Tillagd i listan efter AI Search (nyhetsbrev 2026-08-09). [3]

Vår bedömning

Inte bedömd än. Alla kan ändra.

Kommentarer

Inga kommentarer än. Skriv gärna vilket projekt den kan passa i.

⌘/Ctrl + Enter

Mer från Alibaba (Qwen, Wan, Tongyi)