Trí nhớ ngắn hạn và dài hạn

Trí nhớ ngắn hạn và dài hạn hay Trí nhớ dài-ngắn hạn (tiếng Anh: Long short-term memory, viết tắt là LSTM) là một dạng mạng thần kinh hồi quy nhân tạo trong học sâu. Khác với các mạng thần kinh truyền thẳng tiêu chuẩn, LSTM có kết nối phản hồi. Mạng này không chỉ xử lý các điểm dữ liệu đơn lẻ (như hình ảnh) mà còn xử lý cả chuỗi dữ liệu (chẳng hạn như lời nói hoặc video). Ví dụ, LSTM có thể được sử dụng trong nhận dạng chữ viết tay, nhận dạng tiếng nói và phát hiện các bất thường có tính liên kết, không phân đoạn trong giao thông mạng hoặc các hệ thống phát hiện xâm nhập (IDS).

Một đơn vị LSTM điển hình bao gồm một tế bào (cell), một cổng vào (input gate), một cổng ra (output gate) và một cổng quên (forget gate). Tế bào này ghi nhớ các giá trị trong các khoảng thời gian bất kỳ và ba cổng sẽ điều chỉnh luồng thông tin ra/vào tế bào.

Ứng dụng

Các ứng dụng của LSTM bao gồm:

• Điều khiển robot
• Dự báo chuỗi thời gian
• Nhận dạng giọng nói
• Học nhịp điệu
• Sáng tác âm nhạc
• Học ngữ pháp
• Nhận dạng chữ viết tay
• Nhận dạng hành động của con người
• Ngôn ngữ ký hiệu
• Phát hiện sự tương đồng protein
• Dự đoán vị trí dưới tế bào của protein
• Phát hiện chuỗi thời gian bất thường
• Dự đoán trong quản lý quy trình kinh doanh
• Dự báo lộ trình chăm sóc y tế
• Phân tích ngữ nghĩa
• Đồng phân đoạn đối tượng
• Quản lý hành khách tại sân bay
• Dự báo giao thông vận tải ngắn hạn
• Thiết kế thuốc