Giai đoạn nào trong CRISP-DM xem xét các định dạng dữ liệu của nguồn dữ liệu trong a tổ chức? 

Để xây dựng một mô hình học máy hoàn chỉnh, chúng ta thường cần ba loại tập dữ liệu chính:

* Tập huấn luyện (Training set): Được sử dụng để huấn luyện mô hình. Mô hình học các mẫu và quan hệ từ dữ liệu này.
* Tập xác thực (Validation set): Được sử dụng để tinh chỉnh các siêu tham số của mô hình và đánh giá hiệu suất của mô hình trong quá trình huấn luyện. Nó giúp ngăn ngừa tình trạng quá khớp (overfitting) bằng cách cung cấp một đánh giá khách quan về khả năng khái quát hóa của mô hình trên dữ liệu chưa thấy.
* Tập kiểm tra (Test set): Được sử dụng để đánh giá hiệu suất cuối cùng của mô hình sau khi đã hoàn thành quá trình huấn luyện và tinh chỉnh. Tập kiểm tra phải là dữ liệu hoàn toàn mới mà mô hình chưa từng thấy trước đó.

Do đó, đáp án đúng là a. Tập huấn luyện, tập xác thực và tập kiểm tra. Các đáp án còn lại thiếu một hoặc nhiều loại tập dữ liệu cần thiết cho quy trình xây dựng mô hình học máy hoàn chỉnh.

Bộ xác thực (validation set) là một phần của tập dữ liệu được tách ra từ tập dữ liệu gốc, sau khi đã có tập huấn luyện (training set). Tập xác thực này được sử dụng để đánh giá khách quan mô hình trong quá trình huấn luyện và điều chỉnh các siêu tham số (hyperparameters) của mô hình. Việc sử dụng tập xác thực giúp ngăn chặn tình trạng "quá khớp" (overfitting), khi mô hình học quá kỹ dữ liệu huấn luyện và không còn khả năng tổng quát hóa tốt cho dữ liệu mới.

Phương án A không đúng vì bộ xác thực không dùng để "ban đầu phù hợp với mô hình". Việc "phù hợp" ban đầu thường được thực hiện trên tập huấn luyện.

Phương án B không đúng vì đây là mục đích của tập kiểm tra (test set), không phải tập xác thực. Tập kiểm tra được dùng để đánh giá hiệu năng cuối cùng của mô hình *sau* khi đã hoàn thành quá trình huấn luyện và điều chỉnh trên tập huấn luyện và tập xác thực.

Phương án C đúng vì nó mô tả chính xác vai trò của bộ xác thực: cung cấp đánh giá khách quan trong quá trình huấn luyện và cho phép điều chỉnh các siêu tham số để cải thiện hiệu năng của mô hình.

Phương án D không liên quan đến mục đích sử dụng của bộ xác thực. Việc "giữ cân bằng giữa dữ liệu trong các tập hợp con khác nhau" thường được thực hiện trong quá trình chuẩn bị dữ liệu (ví dụ: sử dụng các kỹ thuật như stratified sampling).

Câu hỏi này kiểm tra hiểu biết về hiện tượng overfitting (quá khớp) trong mô hình hồi quy tuyến tính. Khi mô hình bậc 3 hoàn toàn phù hợp với dữ liệu (lỗi đào tạo và kiểm tra bằng 0), điều này gần như chắc chắn chỉ ra rằng mô hình đã học thuộc dữ liệu huấn luyện, bao gồm cả nhiễu.

Nếu chúng ta giảm bậc của mô hình xuống 2, mô hình sẽ trở nên đơn giản hơn và ít khả năng overfitting hơn. Tuy nhiên, vì mô hình bậc 3 đã hoàn toàn khớp dữ liệu, việc giảm xuống bậc 2 rất có thể sẽ làm giảm khả năng khớp dữ liệu của mô hình. Do đó, mô hình bậc 2 có khả năng cao sẽ underfitting (khớp thiếu) dữ liệu, tức là sẽ có lỗi lớn hơn trên cả tập huấn luyện và tập kiểm tra.

Vì vậy, đáp án chính xác nhất là b.

Câu hỏi này kiểm tra kiến thức về hiện tượng overfitting (quá khớp) trong mô hình hồi quy tuyến tính. Khi một mô hình có độ phức tạp cao (ví dụ, đa thức bậc cao) hoàn toàn khớp với dữ liệu huấn luyện (lỗi đào tạo bằng 0), nó có thể không khái quát hóa tốt cho dữ liệu mới (dữ liệu kiểm tra).

Trong trường hợp này, đa thức bậc 3 đã hoàn toàn khớp với dữ liệu. Khi chuyển sang đa thức bậc 4, mô hình trở nên phức tạp hơn. Do đó, có nhiều khả năng đa thức bậc 4 cũng sẽ hoàn toàn khớp với dữ liệu huấn luyện, nhưng nó sẽ càng dễ bị overfitting hơn. Điều này có nghĩa là, mặc dù lỗi trên tập huấn luyện vẫn bằng 0, nhưng lỗi trên tập kiểm tra có thể tăng lên.

Do đó, đáp án đúng là 'Có nhiều cơ hội là đa thức độ 4 sẽ phù hợp với dữ liệu'.

Câu hỏi này kiểm tra sự hiểu biết về mô hình hồi quy tuyến tính đơn giản (giá = theta_0 + theta_1 * kích thước).

* Phương án a: Nếu theta_1 = 0, phương trình trở thành giá = theta_0. Điều này có nghĩa là giá nhà sẽ luôn bằng theta_0, một giá trị không đổi, bất kể kích thước nhà là bao nhiêu. Đây là một khẳng định đúng.

* Phương án b: Nếu theta_1 âm, giá và kích thước sẽ biến thiên theo hướng ngược nhau. Khi kích thước tăng, giá sẽ giảm, và ngược lại. Do đó, phương án này sai.

* Phương án c: Nếu theta_0 = 0, phương trình trở thành giá = theta_1 * kích thước. Nếu kích thước nhà lớn hơn 0 (kích thước luôn dương), giá sẽ bằng theta_1 nhân với một số dương. Vì theta_1 có thể âm, dương hoặc bằng 0, nên giá hoàn toàn có thể là một số âm, dương hoặc bằng 0. Do đó phương án này sai (mô hình không thể xuất số 0 nếu theta_1 khác 0 và kích thước nhà lớn hơn 0).

* Phương án d: Nếu theta_1 dương, giá và kích thước sẽ biến thiên theo cùng một hướng. Khi kích thước tăng, giá cũng tăng, và ngược lại. Vì vậy, phương án này sai.

Vậy, đáp án đúng là a.