Xem thêm: Encoder-Decoder architectures in deep learning

Mô hình chuỗi-chuỗi cung cấp một số công nghệ có ảnh hưởng nhất ngày nay, từ dịch máy đến tóm tắt văn bản. Hiểu được cách dữ liệu được mã hóa thành một biểu diễn dày đặc và giải mã trở lại thành đầu ra có ý nghĩa là cần thiết cho bất kỳ ai bước vào lĩnh vực học sâu hiện đại. Chương trình này hướng dẫn bạn qua cơ chế cơ bản của kiến trúc mã hóa-mã hóa. Bạn sẽ chuyển từ các khái niệm cơ bản về chuỗi đến hiểu cách các cơ chế chú ý và các mô hình Transformer hiện đại xây dựng trên nền tảng cốt lõi này. Bạn sẽ học được gì: Hiểu các khái niệm cốt lõi của việc học theo trình tự và thiết kế bộ mã hóa-phát mã; Học cách các mạng lặp lại xử lý dữ liệu theo trình bày và chuyển các trạng thái ẩn; Tìm hiểu cơ chế của các cơ chế chú ý giải quyết vấn đề tắc nghẽn; Phân tích sự chuyển đổi cấu trúc từ bộ mã hoá-phá mã cổ điển sang hiện đại Kiến trúc biến đổi; Xem xét các ứng dụng thực tế như dịch máy và tóm tắt văn bản; Xét lại các mô hình mã Python và PyTorch sạch đại diện cho các khái niệm kiến trúc này. Bắt đầu với các định nghĩa cơ bản và ngữ cảnh lịch sử, bạn sẽ tiến hành phân tích khái niệm từng bước của bộ phận mã hóa, cổ chai và giải mã. Chương trình kết thúc với một giới thiệu về các hệ thống dựa trên sự chú ý hiện đại, cung cấp một bản đồ cấu trúc hoàn chỉnh. Lớp học này được thiết kế cho người mới bắt đầu đến trung cấp học máy, nhà phát triển và sinh viên dữ liệu muốn có một hiểu biết rõ ràng, khái niệm về mô hình trình tự. Một sự quen thuộc cơ bản với Python và các nền tảng mạng nơron là hữu ích, nhưng không cần kinh nghiệm học sâu trước đó. Bắt đầu đọc hôm nay để giải mã kiến trúc điều khiển các mô hình ngôn ngữ hiện đại.