딥러닝 논문7 다양한 prior에서의 Contrastive learning 성능 - Intriguing Properties of Contrastive Losses 안녕하세요 콥스랩(COBS LAB)입니다. 오늘 소개해 드릴 논문은 ‘Intriguing Properties of Contrastive Losses’입니다. 해당 내용은 유튜브 ‘딥러닝 논문 읽기 모임' 중 ‘Intriguing Properties of Contrastive Losses’ 영상 스크립트를 편집한 내용으로, 영상으로도 확인하실 수 있습니다. (영상링크:https://youtu.be/uzsI-dEoK2c) 오늘 발표한 논문은 2021년 NIPS에서 발표가 되었고요. 논문의 저자인 Ting Chen는 Google 리서치에서 발표한 SimCLR의 주 저자이기도 합니다. 논문 내용은 Contrastive loss로 학습시켰을 때 나타나는 세 가지 특성입니다. 첫 번째 특성 같은 경우에는 Contr.. 2022. 5. 30. 오직 MLP만으로 구성된 딥러닝 모델! - MLP-Mixer: An all-MLP Architecture for Vision 안녕하세요 콥스랩(COBS LAB)입니다. 오늘 소개해 드릴 논문은 ‘MLP-Mixer: An all-MLP Architecture for Vision’입니다. 해당 내용은 유튜브 ‘딥러닝 논문 읽기 모임' 중 ‘MLP-Mixer’ 영상 스크립트를 편집한 내용으로, 영상으로도 확인하실 수 있습니다. (영상 링크: https://youtu.be/L3vEetyNG_w) 본 논문이 이야기하는 특징을 설명드리겠습니다. 지금까지 흘러온 컴퓨터 비전 분야에서 알 수 있듯이 더 큰 데이터 셋 사용과 컴퓨팅 용량 증가라는 패러다임 전환으로 이어지고 있습니다. 그리고 Convolutional Neural Network가 컴퓨터 비전에서 일반적으로 사용하는 네트워크가 되어왔습니다. 이것을 조금 더 개선하고자 batch n.. 2022. 5. 26. 보다 더 정확하게! – Effectively Leveraging Attributes for Visual Similarity 안녕하세요 콥스랩(COBS LAB) 입니다. 오늘 소개해 드릴 논문은 ‘Effectively Leveraging Attributes for Visual Similarity’입니다. 해당 내용은 유튜브 ‘딥러닝 논문 읽기 모임’ 중 ‘Effectively Leveraging Attributes for Visual Similarity’ 영상 스크립트를 편집한 내용으로, 영상으로도 확인하실 수 있습니다. (영상 링크:https://youtu.be/FrdtIqyVhbc) 오늘 소개해 드릴 논문은 2021년 CVPR에서 발표된 Effectively Leveraging Attributes for Visual Similarity입니다. 이전에는 이미지 유사도 task에 대해서 복잡하지 않는 특징들을 annotatio.. 2022. 5. 23. Contrastive learning을 이용한 2단계 추상 요약 framework -SimCLS: A Simple Framework for Contrastive Learning of Abstractive Summarization 안녕하세요 콥스랩(COBS LAB) 입니다. 오늘 소개해 드릴 논문은 ‘SimCLS: A Simple Framework for Contrastive Learning of Abstractive Summarization’입니다. 해당 내용은 유튜브 ‘딥러닝 논문 읽기 모임' 중 ‘SimCLS’ 영상 스크립트를 편집한 내용으로, 영상으로도 확인하실 수 있습니다. (영상링크:https://youtu.be/3CPfP7oaXO8) 안녕하세요 오늘 소개해 드릴 논문은 2021년 ACL에서 발표된 SimCLS: A Simple Framework for Contrastive Learning of Abstractive Summarization입니다. 먼저 기존 framework인 Seq2 Seq learning frame.. 2022. 5. 23. 이전 1 2 다음
