230+ câu trắc nghiệm Mạng nơ-ron nhân tạo có đáp án - Phần 5

Encoder trích xuất đặc trưng, decoder sinh chú thích

Encoder sinh chú thích, decoder trích xuất đặc trưng

Cả hai đều trích xuất đặc trưng

Cả hai đều sinh chú thích

Mô hình có thể sinh ra thông tin không liên quan

Hiệu suất tăng lên

Chi phí tính toán giảm

Hình ảnh bị nhiễu

Transformer

SVM

Decision Tree

K-means

Huấn luyện mô hình

Tăng cường dữ liệu

Giảm kích thước hình ảnh

Phân loại đối tượng

Tạo mô tả tự động cho hình ảnh trong bảo tàng

Phân tích dữ liệu thời tiết

Nhận diện giọng nói

Dự đoán giá cổ phiếu

Dữ liệu hình ảnh

Dữ liệu chuỗi (sequential data)

Dữ liệu đồ thị

Dữ liệu tĩnh

Chia sẻ trọng số qua các bước thời gian

Sử dụng cơ chế attention

Tính toán convolution

Giảm kích thước dữ liệu

Làm mô hình không thể học các phụ thuộc dài hạn

Tăng tốc độ huấn luyện

Giảm kích thước mô hình

Tăng độ chính xác

Phân loại hình ảnh

Xử lý ngôn ngữ tự nhiên (NLP)

Phát hiện đối tượng

Tăng cường hình ảnh

Lưu trữ thông tin từ các bước thời gian trước

Tính toán gradient

Giảm kích thước dữ liệu

Tăng cường đặc trưng

Bidirectional RNN

LSTM

GRU

Simple RNN

Tanh hoặc Sigmoid

ReLU

Softmax

Linear

Quên thông tin từ các bước đầu tiên

Tăng chi phí tính toán không cần thiết

Không thể hội tụ

Tạo ra nhiễu

CNN

Transformer

Autoencoder

SVM

Dự đoán chuỗi thời gian tài chính

Phát hiện đối tượng trong hình ảnh

Tăng cường hình ảnh

Phân loại đồ thị

Vanishing gradient

Overfitting

Underfitting

Chi phí tính toán cao

Forget gate

Input gate

Output gate

Cell gate

Lưu trữ thông tin dài hạn qua các bước thời gian

Tính toán gradient

Giảm kích thước dữ liệu

Tăng cường đặc trưng

Quyết định thông tin mới được thêm vào cell state

Loại bỏ thông tin cũ

Tính toán đầu ra

Giảm kích thước đặc trưng

Phân loại hình ảnh

Xử lý chuỗi, như dịch máy

Phát hiện đối tượng

Tăng cường hình ảnh

Quyết định đầu ra của hidden state

Loại bỏ thông tin cũ

Thêm thông tin mới

Tính toán gradient

Khả năng học các phụ thuộc dài hạn

Giảm chi phí tính toán

Không cần hàm kích hoạt

Hỗ trợ xử lý hình ảnh

Sigmoid và Tanh

ReLU

Softmax

Linear

CNN

Transformer

Autoencoder

SVM

Dịch máy tự động

Phân loại hình ảnh

Phát hiện đối tượng

Tăng cường hình ảnh