MEDILMM

UVL Transformer
핵심 구성 요소

• 트랜스포머 아키텍쳐

  자기주의 메커니즘을 사용한 데이터 관계 학습

• 멀티 모달 학습

  시각 데이터와 언어 데이터를 동시에 처리

• 언어처리

  텍스트를 토큰화해 처리하고
  이미지나 비디오
  데이터와의 연관성 파악

• 연속 학습 및 적응성

  새로운 데이터나 시나리오에 대해
  지속적으로
  학습하고 적응

• 시각적 특징 추출

  컨볼루셔널 신경망(CNN)과
  비전 트랜스포머 기술(ViT)을 활용한 시각적 특징 추출