LuanVan.vnLuận Văn
Gửi thư

BUILDING A REAL-TIME AI SYSTEMFOR RECOGNIZINGANDSUMMARIZING IT CONVERSATIONS USING WHISPER ANDLLAMA3

Khoá luận tốt nghiệp · Đại học · năm 2026 · đề tài tham khảo

Loại tài liệuKhoá luận tốt nghiệp
Bậc họcĐại học
NgànhCông nghệ thông tin
Tác giảLâm Thế Vinh
Người hướng dẫnPhạm Thế Phi
Cơ sở đào tạoTrường Đại học Cần Thơ
Năm2026
NguồnThư viện số Trường Đại học Cần Thơ · trang gốc

Tóm tắt

As remote and hybrid work environments become the industry standard, thevolume of virtual IT communications has surged. Consequently, manuallycapturing,transcribing, and summarizing highly technical discussions has proventobeinefficient, error-prone, and resource-intensive. This project addressesthesechallenges by introducing an end-to-end, automated Artificial Intelligencepipelinedesigned to capture real-time audio and extract structured meeting intelligencewithminimal human intervention. The proposed system architecture is divided into three core processingphases.First, it employs Faster-Whisper coupled with optimized Voice ActivityDetection(VAD) for low-latency, highly accurate Speech-to-Text (STT) transcription, whichisspecifically configured to recognize complex IT terminologies. Second,Pyannote.audio is integrated to perform precise speaker diarization, clusteringaudioframes to distinguish individual participants. Third, the systemleverages acustomfine-tuned Large Language Model (LLM)—specifically Llama-3-8B-Instructoptimized via Low-Rank Adaptation (LoRA)—to semantically analyze thediarizedtext. This LLM engine is trained to filter out conversational noise and automaticallygenerate a structured post-meeting report encompassing participant identification, keydiscussion points, technical vocabulary, and actionable items. To support seamless real-time operations, the backend is built on FastAPI witharobust Dual-WebSocket architecture. This design effectively bypasses strict networkconstraints (e.g., CORS and tunneling limitations) and facilitates uninterrupted,asynchronous bidirectional data streaming. On the frontend, an enterprise-gradeSplit-Panel Dashboard is developed. It uniquely incorporates Document Picture-in-Picture(PiP) technology, ensuring that live captions remain persistently visible (always-ontop) while users seamlessly switch tabs or share screens during presentations.Ultimately, by combining state-of-the-art NLP models with a fault-tolerant webinfrastructure, this project delivers a highly scalable and practical solutionthatsignificantly modernizes enterprise communication workflows.
Bản toàn văn lưu tại thư viện Trường Đại học Cần Thơ

Thông tin và tóm tắt ở trên lấy từ kho số mở của thư viện trường. Bản toàn văn do thư viện trường quản lý — có nơi cho đọc trực tuyến, có nơi cần tài khoản bạn đọc của trường.

Mở tại thư viện trường ↗
Dùng tài liệu tham khảo cho đúng
  • Đọc để hiểu cách người trước đặt câu hỏi, chọn phương pháp, trình bày số liệu — rồi tự làm với dữ liệu và bối cảnh của bạn.
  • Ý, số liệu, bảng biểu lấy từ tài liệu này phải trích dẫn (tác giả, năm, tên đề tài, cơ sở đào tạo).
  • Đề tài trùng tên vẫn làm được nếu khác đơn vị khảo sát, thời gian hoặc cách tiếp cận — nêu rõ điểm khác trong phần mở đầu.

Hướng dẫn chọn đề tài, cấu trúc và số liệu cho ngành này: Luận văn công nghệ thông tin · Hỏi đáp từng chương với người hướng dẫn số: Học Giả Số · Công cụ số: Luận Văn Số.

Đề tài cùng ngành

Tác giả muốn gỡ, sửa thông tin hoặc bổ sung bản toàn văn: gửi yêu cầu qua trang Liên hệ, kèm đường dẫn trang này.