LuanVan.vnLuận Văn
Gửi thư

XÂY DỰNG HỆ THỐNG PHÂN LOẠI VĂN BẢN TỰ ĐỘNG

Khoá luận tốt nghiệp · Đại học · năm 2024 · đề tài tham khảo

Loại tài liệuKhoá luận tốt nghiệp
Bậc họcĐại học
NgànhCông nghệ thông tin
Tác giảNguyễn Thanh Liêm
Người hướng dẫnNguyễn Minh Khiêm
Cơ sở đào tạoTrường Đại học Cần Thơ
Năm2024
NguồnThư viện số Trường Đại học Cần Thơ · trang gốc

Tóm tắt

Sự phát triển ngày càng lớn và bùng nổ của mạng internet đã kéo theo sự xuất hiện của các trang mạng xã hội, các bài báo, văn bản làm cho số lượng người sử dụng trao đổi thông tin trở nên rất lớn và không ngừng phát triển. Phần lớn những người sử dụng mạng internet thường chia sẻ cảm xúc, cuộc sống, kiến thức, ý kiến, quan điểm, … của chính mình. Việc phân tích và đưa ra chủ đề cho những trao đổi đó nhằm nắm bắt, dễ dàng quản lý, trích xuất thông tin và vô cùng quan trọng, có ý nghĩa lớn cho ngành giáo dục, kinh tế, chính trị, pháp luật, xã hội, … Một giải pháp hiệu quả cho công việc trên là phát triển một ứng dụng có khả năng phân loại văn bản tiếng Việt tự động. Phân loại văn bản là một trong những vấn đề quan trọng của việc xử lý ngôn ngữ tự nhiên thuộc nhóm học có giám sát và trí tuệ nhân tạo. Nhiệm vụ chính của bài toán là đưa ra chủ đề cho văn bản vào một nhóm chủ đề cho trước. Để có thể giải quyết bài toán này cần xử lý hai vấn đề phức tạp và quan trọng ở hai giai đoạn: thu thập dữ liệu từ các trang mạng xã hội và phân tích đưa ra chủ đề thích hợp cho dữ liệu. Phương pháp được đề xuất sử dụng cho đề tài là biểu diễn văn bản bằng TF-IDF để chuyển đổi văn bản thành các vector đặc trưng số học, từ đó áp dụng mô hình phân loại Naïve Bayes cho việc phân loại văn bản. Các bước xử lý dữ liệu bao gồm: tiền xử lý văn bản như loại bỏ các ký tự không cần thiết, chuyển đổi chữ viết thường, loại bỏ từ dừng, chuẩn hóa bảng mã Unicode, … và mã hóa các nhãn chủ đề. Tiến hành đánh giá mô hình thông qua các chỉ số như độ chính xác, độ nhạy và F1-Score nhằm đảm bảo tính toàn diện của kết quả. Đề tài đã có đóng góp vào việc xây dựng một quy trình phân loại văn bản đơn giản, hiệu quả, dễ dàng sử dụng và triển khai trên các hệ thống thông tin thực tế. Kết quả thực tế cho được độ chính xác cao và ổn định khi áp dụng trên các tập dữ liệu khác nhau. Bên cạnh đó, ứng dụng đã giúp quản lý và xử lý lượng lớn thông tin trong nhiều lĩnh vực như quản lý tài liệu, phân loại email, phân tích nội dung trên các nền tảng xã hội, … Từ khóa: Phân loại văn bản, tiếng Việt, học có giám sát, TF-IDF, Naïve Bayes.
Bản toàn văn lưu tại thư viện Trường Đại học Cần Thơ

Thông tin và tóm tắt ở trên lấy từ kho số mở của thư viện trường. Bản toàn văn do thư viện trường quản lý — có nơi cho đọc trực tuyến, có nơi cần tài khoản bạn đọc của trường.

Mở tại thư viện trường ↗
Dùng tài liệu tham khảo cho đúng
  • Đọc để hiểu cách người trước đặt câu hỏi, chọn phương pháp, trình bày số liệu — rồi tự làm với dữ liệu và bối cảnh của bạn.
  • Ý, số liệu, bảng biểu lấy từ tài liệu này phải trích dẫn (tác giả, năm, tên đề tài, cơ sở đào tạo).
  • Đề tài trùng tên vẫn làm được nếu khác đơn vị khảo sát, thời gian hoặc cách tiếp cận — nêu rõ điểm khác trong phần mở đầu.

Hướng dẫn chọn đề tài, cấu trúc và số liệu cho ngành này: Luận văn công nghệ thông tin · Hỏi đáp từng chương với người hướng dẫn số: Học Giả Số · Công cụ số: Luận Văn Số.

Đề tài cùng ngành

Tác giả muốn gỡ, sửa thông tin hoặc bổ sung bản toàn văn: gửi yêu cầu qua trang Liên hệ, kèm đường dẫn trang này.