1000+ câu Trắc nghiệm Nhập môn xử lý ngôn ngữ tự nhiên có đáp án - Phần 5

Quá trình chuyển đổi văn bản thành chữ thường

Quá trình chia văn bản thành các đơn vị nhỏ hơn, chẳng hạn như từ hoặc cụm từ

Quá trình loại bỏ các stop words

Quá trình phân tích cú pháp của câu

Lemmatization đưa từ về dạng gốc có nghĩa (lemma), trong khi stemming chỉ đơn giản loại bỏ các hậu tố và tiền tố

Stemming đưa từ về dạng gốc có nghĩa (lemma), trong khi lemmatization chỉ đơn giản loại bỏ các hậu tố và tiền tố

Lemmatization nhanh hơn stemming

Stemming chính xác hơn lemmatization

Cosine Similarity

Euclidean Distance

Manhattan Distance

Tất cả các đáp án trên

Recurrence

Attention

Convolution

Pooling

Kiểm tra chính tả (Spell checking)

Phân tích cú pháp (Parsing)

Nhận dạng thực thể (Named Entity Recognition)

Phân tích cảm xúc (Sentiment Analysis)

Phân tích cú pháp (Parsing)

Biểu diễn word embedding

Giảm chiều dữ liệu (Dimensionality Reduction)

Sinh văn bản (Text Generation)

Quá trình xác định các tham chiếu trong văn bản, chẳng hạn như ‘anh ấy’ đề cập đến ai

Quá trình loại bỏ các stop words

Quá trình chuyển đổi văn bản thành chữ thường

Quá trình phân tích cú pháp của câu

Nhận dạng ý định (Intent Recognition)

Sinh văn bản (Text Generation)

Phân tích cảm xúc (Sentiment Analysis)

Tóm tắt văn bản (Text Summarization)

Xác định các chủ đề chính trong một tập hợp văn bản

Phân loại văn bản thành các danh mục khác nhau

Tóm tắt nội dung chính của văn bản

Dịch văn bản sang một ngôn ngữ khác

Tăng cường dữ liệu huấn luyện bằng cách dịch văn bản từ ngôn ngữ nguồn sang ngôn ngữ đích, sau đó dịch ngược lại về ngôn ngữ nguồn

Đánh giá chất lượng của mô hình dịch máy

Tóm tắt văn bản đã dịch

Phân loại văn bản đã dịch

Word2Vec

GloVe

One-hot encoding

TF-IDF

Text Generation

Text Summarization

Text Classification

Text Translation

Xác định chủ đề chính của văn bản

Xác định cảm xúc hoặc thái độ của người viết đối với một chủ đề cụ thể

Tóm tắt nội dung chính của văn bản

Dịch văn bản sang một ngôn ngữ khác

Đo lường độ phức tạp của mô hình

Đo lường khả năng dự đoán của mô hình

Đo lường tốc độ huấn luyện của mô hình

Đo lường kích thước của mô hình

Text Summarization

Text Generation

Text Classification

Text Translation

Named Entity Recognition (NER)

Sentiment Analysis

Topic Modeling

Text Summarization

Cho phép mô hình tập trung vào các phần quan trọng nhất của câu khi xử lý

Giúp mô hình dịch văn bản sang ngôn ngữ khác

Giúp mô hình tóm tắt văn bản

Giúp mô hình nhận diện các thực thể có tên

Chuyển đổi văn bản thành chữ thường

Loại bỏ các stop words

Đưa các từ về dạng gốc của chúng

Phân tích cú pháp của câu

Các từ mang ý nghĩa quan trọng nhất trong văn bản

Các từ phổ biến nhưng ít mang ý nghĩa, thường bị loại bỏ trong quá trình tiền xử lý

Các từ được sử dụng để đánh dấu sự kết thúc của một câu

Các từ được sử dụng để liên kết các câu lại với nhau

Dự đoán các từ bị che giấu trong câu

Dịch văn bản sang ngôn ngữ khác

Tóm tắt văn bản

Phân loại văn bản

Xử lý dữ liệu tuần tự, chẳng hạn như văn bản

Phân loại hình ảnh

Phân tích dữ liệu tài chính

Dự đoán thời tiết

Quá trình gán nhãn từ loại (ví dụ: danh từ, động từ, tính từ) cho mỗi từ trong câu

Quá trình loại bỏ các stop words

Quá trình chuyển đổi văn bản thành chữ thường

Quá trình phân tích cú pháp của câu

Text Summarization

Text Classification

Text Generation

Text Translation

Xác định tần suất xuất hiện của các từ trong văn bản

Đánh giá tầm quan trọng của một từ trong một văn bản so với toàn bộ tập hợp văn bản

Loại bỏ các stop words

Chuyển đổi văn bản thành chữ thường

Chuyển đổi từ thành dạng số và biểu diễn chúng trong một không gian vector

Loại bỏ các từ không quan trọng khỏi văn bản

Phân tích cấu trúc ngữ pháp của câu

Tạo ra các từ mới từ văn bản hiện có

Phân tích cú pháp (Parsing)

Phân tích cảm xúc (Sentiment Analysis)

Nhận dạng thực thể có tên (Named Entity Recognition)

Mô hình hóa chủ đề (Topic Modeling)

Text Summarization

Topic Modeling

Text Clustering

Machine Translation

BLEU (Bilingual Evaluation Understudy)

TF-IDF (Term Frequency-Inverse Document Frequency)

Word2Vec

PoS Tagging (Part-of-Speech Tagging)

Stemming

Tokenization

Vector hóa văn bản (Text Vectorization)

Part-of-Speech Tagging

Một mô hình ngôn ngữ dựa trên mạng nơ-ron

Một chuỗi gồm n từ liên tiếp trong một văn bản

Một phương pháp loại bỏ stop words

Một kỹ thuật phân tích cú pháp