Articleresearch.google·2026년 1월 13일·0

Next generation medical image interpretation with MedGemma 1.5 and medical speech to text with MedASR

Quick Summary

Google Research는 의료 영상 해석을 강화한 공개 모델 MedGemma 1.5 4B와 의료 음성 인식 모델 MedASR을 발표하며, 개발자가 의료 AI 애플리케이션을 평가·조정·확장할 수 있는 기반을 넓혔다.

Next generation medical image interpretation with MedGemma 1.5 and medical speech to text with MedASR 관련 대표 이미지

🖼️ 인포그래픽

Next generation medical image interpretation with MedGemma 1.5 and medical speech to text with MedASR 내용을 설명하는 본문 이미지

🖼️ 4컷 인포그래픽

Next generation medical image interpretation with MedGemma 1.5 and medical speech to text with MedASR 내용을 설명하는 본문 이미지

💡 한 줄 요약

Google Research는 의료 영상 해석을 강화한 공개 모델 MedGemma 1.5 4B와 의료 음성 인식 모델 MedASR을 발표하며, 개발자가 의료 AI 애플리케이션을 평가·조정·확장할 수 있는 기반을 넓혔다.

📌 핵심 요약

  • Google은 HAI-DEF 프로그램을 통해 공개해 온 MedGemma 계열을 업데이트해 MedGemma 1.5 4B를 공개하고, Kaggle 기반 MedGemma Impact Challenge를 함께 발표했다.
  • MedGemma 1.5 4B는 CT, MRI, 병리 슬라이드 같은 고차원 의료 영상과 흉부 X선 시계열, 해부학적 위치 추정, 의료 검사 보고서 구조화 등 여러 사용 사례에서 MedGemma 1 4B보다 개선된 성능을 보였다.
  • 텍스트 기능도 강화되어 MedQA와 EHRQA 기준에서 기존 4B 모델보다 향상됐고, 복잡한 텍스트 기반 애플리케이션에는 기존 MedGemma 1 27B 모델도 계속 사용할 수 있다고 설명했다.
  • 새로 공개된 MedASR은 의료 받아쓰기와 의료 도메인 음성을 텍스트로 변환하기 위한 공개 ASR 모델로, Whisper large-v3와 비교해 의료 dictation 벤치마크에서 더 낮은 단어 오류율을 보였다.
  • Google은 MedGemma와 MedASR, MedSigLIP 등 HAI-DEF 모델을 연구 및 상업적 용도로 무료 제공하며, Hugging Face와 Vertex AI, 튜토리얼 노트북, 모델 카드, GitHub 저장소를 통해 개발자가 활용할 수 있게 했다.

🧩 주요 포인트

  1. Google은 HAI-DEF 프로그램을 통해 공개해 온 MedGemma 계열을 업데이트해 MedGemma 1.5 4B를 공개하고, Kaggle 기반 MedGemma Impact Challenge를 함께 발표했다.
  2. MedGemma 1.5 4B는 CT, MRI, 병리 슬라이드 같은 고차원 의료 영상과 흉부 X선 시계열, 해부학적 위치 추정, 의료 검사 보고서 구조화 등 여러 사용 사례에서 MedGemma 1 4B보다 개선된 성능을 보였다.
  3. 텍스트 기능도 강화되어 MedQA와 EHRQA 기준에서 기존 4B 모델보다 향상됐고, 복잡한 텍스트 기반 애플리케이션에는 기존 MedGemma 1 27B 모델도 계속 사용할 수 있다고 설명했다.
  4. 새로 공개된 MedASR은 의료 받아쓰기와 의료 도메인 음성을 텍스트로 변환하기 위한 공개 ASR 모델로, Whisper large-v3와 비교해 의료 dictation 벤치마크에서 더 낮은 단어 오류율을 보였다.
  5. Google은 MedGemma와 MedASR, MedSigLIP 등 HAI-DEF 모델을 연구 및 상업적 용도로 무료 제공하며, Hugging Face와 Vertex AI, 튜토리얼 노트북, 모델 카드, GitHub 저장소를 통해 개발자가 활용할 수 있게 했다.

🧠 상세 정리

1. 의료 AI 확산과 MedGemma 업데이트의 배경

글은 의료 산업에서 인공지능 도입이 일반 경제보다 두 배 빠른 속도로 진행되고 있다는 배경에서 시작한다. Google은 이러한 변화에 대응하기 위해 전년도에 Health AI Developer Foundations, 즉 HAI-DEF 프로그램을 통해 공개 의료 생성 AI 모델 모음인 MedGemma를 발표했다고 설명한다. MedGemma 같은 HAI-DEF 모델은 완성된 임상 제품이 아니라, 개발자가 각자의 의료 사용 사례에 맞게 평가하고 조정하기 위한 출발점으로 제시된다. 공개 이후 MedGemma는 수백만 건의 다운로드와 Hugging Face에 올라온 수백 개의 커뮤니티 변형 모델을 만들 만큼 큰 반응을 얻었다고 소개된다.

2. MedGemma 1.5 4B와 MedASR의 발표

본문의 핵심 발표는 MedGemma 1.5 4B 공개와 MedGemma Impact Challenge 시작, 그리고 의료 음성-텍스트 모델 MedASR 공개다. Google은 커뮤니티의 직접 피드백을 반영해 MedGemma 1.5 4B가 여러 의료 영상 모달리티를 다루는 애플리케이션에 더 잘 맞도록 개선됐다고 설명한다. 지원 범위에는 CT, MRI, 병리 영상 같은 고차원 의료 영상, 흉부 X선 시계열 검토, 흉부 X선 해부학적 위치 추정, 의료 검사 보고서의 구조화 데이터 추출이 포함된다. 또한 이 4B 모델은 오프라인 실행이 가능할 만큼 작고 계산 효율적인 출발점으로 제시되며, 더 복잡한 텍스트 기반 작업에는 기존 27B 모델을 계속 사용할 수 있다고 덧붙인다.

3. 모델 공개 방식과 개발자 생태계

Google은 MedGemma 1.5, MedASR, MedSigLIP 이미지 인코더를 포함한 HAI-DEF 모델들이 연구와 상업적 용도로 무료로 제공된다고 밝힌다. 모델은 Hugging Face에서 다운로드할 수 있고, Vertex AI를 통해 클라우드에서 학습·조정해 확장 가능한 애플리케이션으로 만들 수 있다고 설명된다. MedASR은 의료 받아쓰기를 텍스트로 변환하는 모델이며, MedGemma와 결합해 더 고급 추론 작업에 활용될 수 있는 구성 요소로 소개된다. 글은 모델 카드와 튜토리얼 노트북을 통해 세부 성능과 사용 방법을 확인할 수 있다고 안내하며, 개발자 중심의 실험과 적용을 강조한다.

4. MedGemma Impact Challenge

Google은 MedGemma 모델의 창의적이고 영향력 있는 사용 사례를 장려하기 위해 MedGemma Impact Challenge를 발표했다. 이 행사는 Kaggle에서 열리는 해커톤이며 총상금은 10만 달러로 제시된다. 참가 대상은 모든 개발자이며, MedGemma와 HAI-DEF를 기반으로 의료와 생명과학 분야에서 AI가 어떤 가능성을 가질 수 있는지 보여주는 것이 목적이다. 본문은 이 챌린지를 단순한 홍보 이벤트가 아니라, 개발자들이 실제 의료 AI 애플리케이션 아이디어를 실험하고 공유하도록 유도하는 장치로 배치한다.

5. 고차원 의료 영상 해석 성능 개선

MedGemma는 원래부터 의학의 다중 모달 특성을 반영한 멀티모달 모델로 설계됐으며, 기존 MedGemma 1은 흉부 X선, 피부과 이미지, 안저 이미지, 병리 패치 같은 2차원 의료 이미지 해석을 지원했다. MedGemma 1.5에서는 CT와 MRI의 3차원 볼륨 표현, 전체 슬라이드 병리 영상 같은 고차원 의료 영상으로 지원 범위를 확장했다. 개발자는 CT나 MRI의 여러 슬라이스, 병리 영상의 여러 패치를 작업 지시 프롬프트와 함께 입력할 수 있다. 내부 벤치마크에서 CT 질병 관련 소견 분류 정확도는 58%에서 61%로, MRI 소견 분류 정확도는 51%에서 65%로 개선됐다고 제시된다. 병리 슬라이드 관련 내부 벤치마크에서는 ROUGE-L 기준 예측 충실도가 0.02에서 0.49로 올랐고, 이는 특정 작업 모델인 PolyPath의 0.498과 유사한 수준으로 설명된다.

6. 영상 관련 세부 기능과 한계

Google은 고차원 영상 지원을 이전의 CT 임베딩 생성 API 도구였던 CT foundation의 자연스러운 발전으로 설명한다. 본문은 MedGemma 1.5가 고차원 의료 데이터를 해석하면서도 일반 2D 데이터와 텍스트 해석 능력을 유지하는 공개 멀티모달 대형 언어 모델이라고 소개하지만, 이 기능들이 아직 초기 단계이고 완벽하지 않다는 점도 명시한다. 개발자가 자체 데이터로 MedGemma를 파인튜닝하면 더 나은 결과를 얻을 수 있으며, Google은 CT와 병리 영상 활용을 보여주는 튜토리얼 노트북도 공개했다. 또한 흉부 X선 해부학적 위치 추정, 흉부 X선 시계열 질병 평가, 일반 의료 단일 이미지 해석, 검사 보고서 구조화 추출에서도 기존 4B 모델보다 개선됐다고 제시한다.

7. 텍스트 기능과 의료 기록 질의응답 향상

영상 기능 개선과 별도로, MedGemma 1.5 4B는 의료 텍스트 처리 성능도 강화됐다. Google은 새로운 학습 데이터셋과 학습 기법을 추가해 기본 의료 텍스트 기능을 개선했다고 설명한다. 성능 지표로는 MedQA에서 기존 MedGemma 1 4B의 64%보다 높은 69%를 기록했고, 텍스트 기반 전자의무기록 질의응답인 EHRQA에서는 68%에서 90%로 향상됐다고 제시한다. 이 대목은 MedGemma 1.5가 단순히 영상 모델로만 확장된 것이 아니라, 의료 추론과 의료 기록 정보 검색 같은 텍스트 중심 작업에서도 더 나은 출발점을 제공한다는 논지로 이어진다.

8. MedASR의 의료 음성 인식 역할

글은 대형 언어 모델의 주요 인터페이스가 현재는 텍스트이지만, 의료 현장에서는 받아쓰기와 환자-의료진 대화처럼 음성 커뮤니케이션이 여전히 중요하다고 설명한다. MedASR은 의료 분야의 전문 어휘에 익숙해야 하는 사용 사례를 지원하기 위해 개발된 음성-텍스트 모델이다. 이 모델은 의료 받아쓰기를 전사하거나, MedGemma에 입력할 프롬프트를 음성으로 생성하는 자연스러운 방법으로 사용할 수 있다. 성능 비교에서는 일반 ASR 모델인 Whisper large-v3와 비교해 흉부 X선 dictation에서 단어 오류율이 12.5%에서 5.2%로 낮았고, 다양한 전문과와 화자를 포함한 내부 의료 dictation 벤치마크에서는 28.2%에서 5.2%로 낮았다고 제시된다.

9. 실제 활용 사례와 시작 방법

본문은 전 세계 헬스테크 스타트업과 개발자들이 MedGemma를 연구와 제품 개발에 활용하고 있다고 소개한다. 예시로 Qmed Asia는 말레이시아의 150개 이상 임상 진료 지침을 탐색하는 대화형 인터페이스 askCPG에 MedGemma를 적용했고, 말레이시아 보건부는 이 인터페이스가 일상적 임상 의사결정 지원에서 지침 탐색을 더 실용적으로 만들었다고 설명했다. 대만 국가건강보험서는 폐암 수술 전 평가를 위해 3만 건 이상의 병리 보고서와 비정형 데이터에서 핵심 정보를 추출하는 데 MedGemma를 활용했다고 소개된다. 마지막으로 글은 Hugging Face 컬렉션, Vertex AI, MedASR 모델 카드, GitHub 튜토리얼, HAI-DEF 사이트, 뉴스레터와 포럼을 통해 개발자가 시작할 수 있다고 안내한다.

🧾 핵심 주장 / 시사점

  • MedGemma 1.5의 핵심 변화는 단일 2D 의료 이미지 해석에서 CT, MRI, 병리 슬라이드처럼 더 복잡한 고차원 데이터 해석으로 확장했다는 점이다.
  • Google은 MedGemma를 즉시 임상에 투입하는 완제품이 아니라, 개발자가 검증·조정·파인튜닝해 각 사용 사례에 맞게 의미 있게 수정해야 하는 공개 기반 모델로 제시한다.
  • MedASR은 의료 음성을 텍스트로 바꾸는 입력 계층을 제공하고, MedGemma는 그 텍스트와 의료 데이터를 바탕으로 추론하는 구조를 맡아 두 모델이 함께 의료 AI 워크플로를 구성할 수 있음을 보여준다.

✅ 액션 아이템

  • MedGemma 1.5 4B와 MedGemma 1 4B를 CT·MRI·병리 슬라이드·흉부 X선 시계열·보고서 구조화 작업에서 병렬 평가해 성능 개선폭을 정량 비교한다.
  • 텍스트 과제는 MedQA·EHRQA 결과를 기준으로 MedGemma 1 27B 지속 구간과 1.5 4B 전환 구간을 용도별로 구분한다.
  • MedGemma·MedASR·MedSigLIP의 Hugging Face·Vertex AI·GitHub 자료를 확인해 배포 가능성, 업데이트 이력, 입력·출력 제약을 점검한다.

❓ 열린 질문

  • 의료 dictation 장면(진료기록·검사설명)에서 MedASR WER이 Whisper large-v3보다 실제로 더 낮은지 정량 검증할 수 있는가?
  • Kaggle 기반 MedGemma Impact Challenge 성능이 내부 데이터셋에서 일치하지 않으면 채택 기준은 어떤 지표와 허용 오차로 재설정할 것인가?
  • HAI-DEF 모델을 연구·상업적 용도로 무료 사용 시 라이선스 범위와 의료 데이터 처리 조건은 어떤 조항을 먼저 확인해야 하는가?

관련 문서

공통 태그와 주제 흐름을 기준으로 같이 보면 좋은 문서를 이어서 제안합니다.