Dataset thống kê: điểm kiểm tra, chiều cao, giao hàng, A/B
Bài 7/8 · Chương 1
Bắt đầu với thống kê
- 5 phút
- Cơ bản
- Python 3.14
- Cập nhật
Trong bài này · 9
Trang này giới thiệu bộ dataset thống kê tiếng Việt mà tutorial dùng: điểm kiểm tra, chiều cao, thời gian giao hàng, khảo sát hài lòng, thí nghiệm A/B và bảy file khác. Mở trang khi một bài nhắc tới một file mà bạn muốn biết file đó chứa gì, hay khi muốn chọn một file để tự luyện.
Số giả lập, đọc bằng tên trần
Số, mã và nhãn trong các file là số giả lập do AIDev sinh bằng script có hạt giống cố định, nên sinh lại cho đúng từng byte. Không file nào chép từ bộ dữ liệu của bên khác, và không có dữ liệu cá nhân thật: mã học sinh, mã nhân viên chỉ là số thứ tự. Nhiệt độ hai thành phố không phải số đo của trạm nào, lương theo ngành không phải số liệu thị trường lao động. Vì thế các bài không rút kết luận về thế giới thật từ những con số này.
Trên trang tutorial, bài dùng file nào thì file đó đã nằm sẵn trong thư mục chạy. Bạn đọc bằng tên trần, không đường dẫn, như pd.read_csv("ab_test.csv"). Mỗi bài liệt kê các file nó dùng ở mục "Dữ liệu của bài" để bạn tải về; bấm tên một file trên trang này để tới bài đầu tiên dùng nó. Cách đọc và các tham số của read_csv() có ở bài read_csv(). Dữ liệu phát hành theo giấy phép CC0 1.0: bạn dùng lại tự do, kể cả cho bài giảng của mình.
Thống kê mô tả: điểm, chiều cao, lương
File | Dòng | Cột | Dùng ở |
|---|---|---|---|
160 |
| tổng thể và mẫu, trung bình, trung vị, phương sai, hồi quy | |
360 |
| phân phối chuẩn, khoảng tin cậy, t-test hai mẫu | |
750 |
| trung bình, trung vị, mốt, độ lệch, kiểm định phi tham số | |
420 |
| loại dữ liệu, mốt, khoảng tin cậy của tỉ lệ |
Điểm kiểm tra có bước 0,25, nên có điểm trùng và mốt có nghĩa. Lương theo ngành lệch phải: ngành nào trung bình cũng lớn hơn trung vị. Năm câu khảo sát lưu bằng số 1–5 nhưng là dữ liệu thứ bậc, nên bài tả chúng bằng bảng tần số và trung vị. Cột nhom_tuoi dùng gạch nối dài –, như 18–24, nên gõ dấu trừ - khi lọc thì không khớp dòng nào.
Xác suất và phân phối
File | Dòng | Cột | Dùng ở |
|---|---|---|---|
1.500 |
| xác suất có điều kiện, biến cố độc lập, chi bình phương | |
588 |
| ||
240 |
| phân phối nhị thức, dự án kiểm tra lô hàng | |
800 |
| phân phối mẫu, bootstrap, tứ phân vị, ECDF |
Mỗi dòng của lua_chon_do_uong.csv là một ly, ba cột đều định tính, hợp với bảng chéo. khach_theo_gio.csv đếm khách mỗi giờ của một quán, nên là biến rời rạc. Thời gian giao hàng là biến liên tục có đuôi phải dài, ví dụ tốt cho các bài cần dữ liệu không chuẩn.
Kiểm định, tương quan và A/B test
File | Dòng | Cột | Dùng ở |
|---|---|---|---|
180 |
| t-test một mẫu, ANOVA ba máy | |
45 |
| t-test cặp, Wilcoxon | |
365 |
| tương quan Spearman, bài tập tương quan và hồi quy | |
112 |
| phân tích A/B test, hai tỉ lệ, dự án A/B test |
Hai file chay_truoc_sau.csv và nhiet_do_hai_thanh_pho.csv là bảng rộng: một dòng ghi hai số đo của cùng một em hay cùng một ngày, đúng dạng mà t-test cặp cần. ab_test.csv đã gom theo ngày, phiên bản và thiết bị. Bài cần từng lượt xem thì bung ra bằng np.repeat.
Hai file dùng lại từ tutorial dữ liệu
Hai dự án dùng file lớn hơn của tutorial pandas, mô tả đủ cột ở trang file CSV mẫu:
File | Dòng | Cột chính | Dùng ở |
|---|---|---|---|
500 |
| dự án phổ điểm thi | |
1.526 |
| dự án ba kênh bán hàng |
diem_thi.csv khác diem_kiem_tra.csv: 500 thí sinh của nhiều tỉnh và nhiều môn. Ô trống ở các môn của ban khác là thật, và sbd mất số 0 đầu khi đọc mặc định. Bộ điểm kiểm tra nhỏ hơn, theo lớp, dùng cho các bài mô tả và so nhóm.
Câu hỏi thường gặp
Chạy các file trên máy thế nào?
Trên trang, file đã nằm sẵn nên bạn không cần tải. Muốn chạy trên máy, đặt file cạnh script rồi đọc bằng tên trần như trên trang.
Dữ liệu mẫu thống kê này có dùng cho bài giảng được không?
Được. Giấy phép CC0 1.0 cho phép dùng, sửa và chia sẻ lại mà không cần xin phép hay ghi nguồn. Khi dùng, nên nói rõ với người học đây là số giả lập, như các bài của tutorial.
Vì sao không dùng số liệu thật?
Số giả lập cho biết trước đáp án: tutorial biết dữ liệu được sinh với tham số nào, nên kiểm được một phương pháp có tìm ra đúng tham số đó không. Bài mô phỏng Monte Carlo dùng cùng ý này.
Chủ đề
Bài này có hữu ích?
Hỏi đáp
Tham vấn chuyên môn
Nhà sáng lập AIDev và VietPlatform · Thạc sĩ AI MSE
- Tốt nghiệp thủ khoa xuất sắc Thạc sĩ AI MSE.
- Đồng sáng lập, CTO E-University, SVOnline: số hóa 10+ đại học, 40.000+ sinh viên.
- Xây hệ thống AI cho doanh nghiệp tại VietPlatform.