HỆ THỐNG TỰ ĐỘNG TẠO CHÚ THÍCH ẢNH BẰNG MÔ HÌNH BLIP-2 VÀ LORA
Khoá luận tốt nghiệp · Đại học · năm 2026 · đề tài tham khảo
| Loại tài liệu | Khoá luận tốt nghiệp |
|---|---|
| Bậc học | Đại học |
| Ngành | Công nghệ thông tin |
| Tác giả | Đỗ Đình Đình |
| Người hướng dẫn | Phạm Thế Phi |
| Cơ sở đào tạo | Trường Đại học Cần Thơ |
| Năm | 2026 |
| Nguồn | Thư viện số Trường Đại học Cần Thơ · trang gốc |
Tóm tắt
Luận văn "Hệ thống tự động tạo chú thích ảnh bằng mô hình BLIP-2 và LoRA" giải quyết bài toán sinh câu mô tả hình ảnh tự động. Hiện nay, các mô hình đa phương thức lớn (VLMs) ở chế độ Zero-shot thường chỉ sinh ra câu chú thích chung chung, sơ sài, trong khi việc tinh chỉnh toàn bộ đòi hỏi chi phí phần cứng đắt đỏ và dễ làm mất đi tính tổng quát ban đầu của kiến trúc gốc. Để giải quyết vấn đề này, đề tài đề xuất giải pháp kết hợp mô hình đa phương thức lớn BLIP-2 (gồm bộ mã hóa ViT-g/14, Q-Former và bộ giải mã ngôn ngữ OPT-2.7B) với kỹ thuật tinh chỉnh tham số hiệu quả LoRA. Hệ thống áp dụng cơ chế lượng hóa ma trận 4-bit (NF4 QLoRA) để tối ưu hóa không gian bộ nhớ VRAM trên GPU NVIDIA Tesla T4, huấn luyện trên tập dữ liệu Flickr30k và kiểm định liên miền trên eepFashion. Về mặt phần mềm, đề tài xây dựng tầng dịch vụ Backend bằng FastAPI để tiếp nhận ảnh và xử lý suy luận, kết hợp giao diện ứng dụng web trực quan triển khai trực tuyến trên nền tảng đám mây Hugging Face Spaces. Kết quả thực nghiệm về máy học cho thấy mô hình đề xuất đạt hiệu năng nội miền vượt trội trên tập Flickr30k với chỉ số CIDEr đạt 69.15 và BLEU-4 đạt 25.96, đồng thời chỉ yêu cầu cập nhật khoảng 0.14% tổng số tham số cấu trúc gốc. Về phần mềm website, hệ thống xây dựng thành công ứng dụng cho phép người dùng tải ảnh tĩnh, tự động gọi mô hình qua RESTful API để sinh câu chú thích tiếng Anh chi tiết, tích hợp hiển thị thông số vận hành và tính năng sao chép kết quả nhanh chóng.
Bản toàn văn lưu tại thư viện Trường Đại học Cần Thơ
Thông tin và tóm tắt ở trên lấy từ kho số mở của thư viện trường. Bản toàn văn do thư viện trường quản lý — có nơi cho đọc trực tuyến, có nơi cần tài khoản bạn đọc của trường.
Mở tại thư viện trường ↗
Dùng tài liệu tham khảo cho đúng
- Đọc để hiểu cách người trước đặt câu hỏi, chọn phương pháp, trình bày số liệu — rồi tự làm với dữ liệu và bối cảnh của bạn.
- Ý, số liệu, bảng biểu lấy từ tài liệu này phải trích dẫn (tác giả, năm, tên đề tài, cơ sở đào tạo).
- Đề tài trùng tên vẫn làm được nếu khác đơn vị khảo sát, thời gian hoặc cách tiếp cận — nêu rõ điểm khác trong phần mở đầu.
Hướng dẫn chọn đề tài, cấu trúc và số liệu cho ngành này: Luận văn công nghệ thông tin · Hỏi đáp từng chương với người hướng dẫn số: Học Giả Số · Công cụ số: Luận Văn Số.
Đề tài cùng ngành
- ỨNG DỤNG CÁC MÔ HÌNH MÁY HỌC ĐỂ NHẬN DẠNG TƯ THẾ YOGA TRÊN DỮ LIỆU KHUNG XƯƠNG
- GIẢI PHÁP CỤM CHO HỆ THỐNG THI TRỰC TUYẾN DỰA TRÊN MOODLE
- HỆ THỐNG QUẢN LÝ ĐỀ TÀI LUẬN VĂN TỐT NGHIỆP ĐẠI HỌC
- HỆ THỐNG QUẢN LÝ ĐẶT TOUR DU LỊCH
- XÂY DỰNG CHATBOT TỰ ĐỘNG HỖ TRỢ CHO WEBSITE KINH DOANH PHỤ KIỆN HANDMADE
- XÂY DỰNG WEBSITE HỖ TRỢ TÌM VIỆC LÀM LĨNH VỰC CÔNG NGHỆ THÔNG TIN
- XÂY DỰNG HỆ THỐNG NHẬN DẠNG VÀ TRÍCH XUẤT THÔNG TIN TỪ HÌNH ẢNH CĂN CƯỚC CÔNG DÂN
- XÂY DỰNG WEBSITE KINH DOANH THIẾT BỊ ĐIỆN GIA DỤNG KẾT HỢP VỚI CHATBOT
Tác giả muốn gỡ, sửa thông tin hoặc bổ sung bản toàn văn: gửi yêu cầu qua trang Liên hệ, kèm đường dẫn trang này.