학습 데이터를 가지고 카테고리 분류를 하고자하는데 , 대/중/소분류로 계층적인 구조입니다.
* 학습 데이터 : 문장 및 문장별 카테고리 데이터
이 경우, 데이터 학습에 어떤 모델을 써야하는지 조언을 들을 수 있을까요 ?
찾아본 것 중에서는 계층적 클러스터링이 개념상 유사하지만, 계층적 클러스터링은 비지도 학습이라 안맞을 것 같고
학습된 가중치를 이용해 하위 분류를 학습하는 전이 학습에 대해서도 찾아봤는데 내용이 무척 어렵네요 ㅠㅠ
혹시 위와 같은 분류를 할 때 높은 예측력을 보이는 모델을 아신다면 말씀 부탁드립니다 !
추가적으로, 위와 같은 계층적 카테고리일 경우 대/중/소 별로 모델링을 따로 해야하는지도 궁금합니다 !
카카오 계정과 연동하여 게시글에 달린 댓글 알람, 소식등을 빠르게 받아보세요
댓글 2개
2022.03.24
대충 Transformer 쓴게 SoTA일 가능성이 높습니다
Transformer로 Contrastive learning 하고 supervised 로 튜닝해주거나
최근에 나온 MLP Mixer 같은게 classification쪽에서는 꽤 좋은 성능을 보이는거같네요
그리고 용어가 한국어라 잘 모르겠습니다..
2022.03.24
2022.03.24