Chắt lọc tri thức có trọng số theo lớp từ mô hình ngôn ngữ lớn sang mô hình nhỏ
Đồ án tốt nghiệp · Đại học · năm 2025 · đề tài tham khảo
| Loại tài liệu | Đồ án tốt nghiệp |
|---|---|
| Bậc học | Đại học |
| Ngành | Xã hội, ngôn ngữ, y dược |
| Tác giả | Đào Quốc Tuấn |
| Người hướng dẫn | Ngô Văn Linh |
| Cơ sở đào tạo | Đại học Bách khoa Hà Nội |
| Năm | 2025 |
| Nguồn | Thư viện số Đại học Bách khoa Hà Nội · trang gốc |
Tóm tắt
Trình bày phương pháp chắt lọc tri thức nhằm nâng cao hiệu quả truyền tri thức từ mô hình ngôn ngữ lớn sang mô hình nhỏ trong điều kiện khác biệt về tokenizer, từ vựng và kiến trúc. Phân tích thực trạng các phương pháp hiện có còn hạn chế trong căn chỉnh biểu diễn tầng ẩn và xử lý sự không tương thích giữa các mô hình. Đề xuất giải pháp chắt lọc tri thức có trọng số theo lớp, kết hợp phép chiếu từ vựng, căn chỉnh cross-tokenizer và lựa chọn các tầng giáo viên theo mức độ ảnh hưởng để cải thiện khả năng học của mô hình học sinh. Kết luận khẳng định phương pháp nâng cao hiệu quả chắt lọc và cải thiện kết quả thực nghiệm trên các bộ dữ liệu theo dõi hướng dẫn
Bản toàn văn lưu tại thư viện Đại học Bách khoa Hà Nội
Thông tin và tóm tắt ở trên lấy từ kho số mở của thư viện trường. Bản toàn văn do thư viện trường quản lý — có nơi cho đọc trực tuyến, có nơi cần tài khoản bạn đọc của trường.
Mở tại thư viện trường ↗
Dùng tài liệu tham khảo cho đúng
- Đọc để hiểu cách người trước đặt câu hỏi, chọn phương pháp, trình bày số liệu — rồi tự làm với dữ liệu và bối cảnh của bạn.
- Ý, số liệu, bảng biểu lấy từ tài liệu này phải trích dẫn (tác giả, năm, tên đề tài, cơ sở đào tạo).
- Đề tài trùng tên vẫn làm được nếu khác đơn vị khảo sát, thời gian hoặc cách tiếp cận — nêu rõ điểm khác trong phần mở đầu.
Hướng dẫn chọn đề tài, cấu trúc và số liệu cho ngành này: Luận văn xã hội, ngôn ngữ, y dược · Hỏi đáp từng chương với người hướng dẫn số: Học Giả Số · Công cụ số: Luận Văn Số.
Đề tài cùng ngành
- Nghiên cứu và ứng dụng mô hình DCGAN trong sinh ảnh y tế
- Nghiên cứu sàng lọc các chủng xạ khuẩn và đánh giá khả năng sinh hoạt chất kháng Xanthomonas oryzae pv.oryzae gây bệnh bạc lá lúa.
- Phân tích hệ glycoprotein huyết thanh bệnh nhân Leukemia
- Thiết kế hệ thống điều hòa công nghệ phòng sạch cho nhà máy sản xuất dược phẩm tại Hải Dương
- Phân tích và đề xuất các giải pháp nâng cao sự hài lòng của cán bộ tại Bệnh viện đa khoa huyện Quang Bình
- Một số giải pháp đào tạo đội ngũ kỹ thuật viên tại bệnh viện đa khoa Medlatec
- Nghiên cứu, thiết kế, mô phỏng đặc tính khí động VTOL UAV cánh Delta vận chuyển dược phẩm, vật tư y tế
- Nghiên cứu xử lý tín hiệu trong thiết bị theo dõi bệnh nhân
Tác giả muốn gỡ, sửa thông tin hoặc bổ sung bản toàn văn: gửi yêu cầu qua trang Liên hệ, kèm đường dẫn trang này.