EZI 기술 블로그 JU

Multimodal learning 본문

Modeling/deep learning

Multimodal learning

eziju 2023. 3. 15. 10:22

multimodal 변수가 많다는 의미가 아니라, 변수들의 차원이 달라야 한다.

 

1. Representation

1-1.joint representation

1-2. coordinated representation

ex) Deep CCA (Deep Canonical Correlation Analysis) -> 서로 다른 데이터셋을 각각 축약한 뒤 concat

 

https://seunghan96.github.io/mult/study-(multi)Multimodal-Learning%EC%86%8C%EA%B0%9C/ 

 

[multimodal] Multimodal Learning 소개

Multimodal Deep Learning에 대한 소개글

seunghan96.github.io

 

반응형

'Modeling > deep learning' 카테고리의 다른 글

Diffusion model  (0) 2023.03.24
multimodal learning architecture 레퍼런스  (0) 2023.03.21