이 논문은 다중 해상도 시계열 트랜스포머(MTST)라는 새로운 모델을 제안한다. MTST는 다음과 같은 특징을 가진다:
다중 브랜치 아키텍처를 통해 다양한 시간 규모의 시계열 패턴을 동시에 모델링할 수 있다. 각 브랜치는 서로 다른 크기의 패치를 사용하여 고주파와 저주파 패턴을 각각 학습한다.
상대적 위치 인코딩을 사용하여 시계열의 주기성을 효과적으로 학습할 수 있다.
다양한 실세계 데이터셋에 대한 실험 결과, MTST가 기존 최신 모델들을 압도적으로 뛰어넘는 성능을 보여준다.
모델 구조와 위치 인코딩 방식에 대한 심층적인 분석을 통해 MTST의 우수성을 입증한다.
In un'altra lingua
dal contenuto originale
arxiv.org
Approfondimenti chiave tratti da
by Yitian Zhang... alle arxiv.org 03-25-2024
https://arxiv.org/pdf/2311.04147.pdfDomande più approfondite