Xây dựng hệ thống thu thập và xử lý dữ liệu hỗ trợ phân tích nhu cầu vận chuyển sử dụng các thành phần của hệ sinh thái Hadoop
Đồ án tốt nghiệp · Đại học · năm 2025 · đề tài tham khảo
| Loại tài liệu | Đồ án tốt nghiệp |
|---|---|
| Bậc học | Đại học |
| Ngành | Kỹ thuật, xây dựng, môi trường |
| Tác giả | Nguyễn Nam Hoàng |
| Người hướng dẫn | Nguyễn Văn Sơn |
| Cơ sở đào tạo | Đại học Bách khoa Hà Nội |
| Năm | 2025 |
| Nguồn | Thư viện số Đại học Bách khoa Hà Nội · trang gốc |
Tóm tắt
Nghiên cứu tập trung xây dựng hệ thống thu thập và xử lý dữ liệu lớn nhằm hỗ trợ phân tích nhu cầu vận chuyển dựa trên dữ liệu taxi. Giải pháp sử dụng các thành phần trong hệ sinh thái Hadoop kết hợp Kafka, Spark, Hive, Trino, Airflow, Iceberg và Superset để thực hiện thu thập, làm sạch, lưu trữ, xử lý và trực quan hóa dữ liệu trong môi trường phân tán. Hệ thống triển khai quy trình ETL tự động, xử lý dữ liệu thời gian thực và hỗ trợ xây dựng mô hình dự đoán số lượng chuyến taxi theo thời gian. Kết quả thực nghiệm cho thấy hệ thống vận hành ổn định, có khả năng mở rộng, hỗ trợ truy vấn và phân tích dữ liệu hiệu quả, đáp ứng yêu cầu xử lý dữ liệu lớn phục vụ ra quyết định.
Bản toàn văn lưu tại thư viện Đại học Bách khoa Hà Nội
Thông tin và tóm tắt ở trên lấy từ kho số mở của thư viện trường. Bản toàn văn do thư viện trường quản lý — có nơi cho đọc trực tuyến, có nơi cần tài khoản bạn đọc của trường.
Mở tại thư viện trường ↗
Dùng tài liệu tham khảo cho đúng
- Đọc để hiểu cách người trước đặt câu hỏi, chọn phương pháp, trình bày số liệu — rồi tự làm với dữ liệu và bối cảnh của bạn.
- Ý, số liệu, bảng biểu lấy từ tài liệu này phải trích dẫn (tác giả, năm, tên đề tài, cơ sở đào tạo).
- Đề tài trùng tên vẫn làm được nếu khác đơn vị khảo sát, thời gian hoặc cách tiếp cận — nêu rõ điểm khác trong phần mở đầu.
Hướng dẫn chọn đề tài, cấu trúc và số liệu cho ngành này: Luận văn kỹ thuật, xây dựng, môi trường · Hỏi đáp từng chương với người hướng dẫn số: Học Giả Số · Công cụ số: Luận Văn Số.
Đề tài cùng ngành
- Nghiên cứu tích hợp thiết bị AIoT độc lập giám sát các thông số môi trường
- Nghiên cứu và phát triển mô-đun năng lượng mặt trời cho mạng thiết bị quan trắc môi trường quy mô khu vực
- Xây dựng bài giảng điện tử về hệ thống phanh TCS trên ô tô
- Nghiên cứu tổng hợp vật liệu hấp phụ Sulphua kim loại để xử lý các nguồn khí có nồng độ thủy ngân cao
- Nghiên cứu xây dựng quy trình tổng hợp Amantadine hydrochloride đi từ 1-bromoadamantane qua con đường Amino hóa trực tiếp
- Nghiên cứu xử lý nước thải sữa bằng công nghệ SBR kết hợp lọc màng
- Nghiên cứu, thiết kế và chế tạo thử nghiệm giường bệnh nhân điều khiển điện 5 chức năng.
- Nâng cao hiệu quả sản xuất và hoạt động bảo vệ môi trường thông qua áp dụng đánh giá sản xuất sạch hơn tại công ty dệt Minh Khai
Tác giả muốn gỡ, sửa thông tin hoặc bổ sung bản toàn văn: gửi yêu cầu qua trang Liên hệ, kèm đường dẫn trang này.