Memory is crucial for cognitive functions, with pre-trained language models showing remarkable memorizing abilities. Vanilla models suffer from catastrophic forgetting, while pre-training enhances memory retention. Knowledge relevance and diversification significantly impact memory formation.
เป็นภาษาอื่น
จากเนื้อหาต้นฉบับ
arxiv.org
ข้อมูลเชิงลึกที่สำคัญจาก
by Boxi Cao,Qia... ที่ arxiv.org 03-14-2024
https://arxiv.org/pdf/2305.09144.pdfสอบถามเพิ่มเติม