Trong một cụm Hadoop, điều gì đúng với khối HDFS không còn khả dụng do hỏng đĩa hoặc lỗi máy?

Câu hỏi yêu cầu tìm lệnh Hadoop để liệt kê các khối tạo nên mỗi tệp trong hệ thống tệp HDFS. Lệnh hdfs fsck là công cụ dòng lệnh được sử dụng để kiểm tra tính toàn vẹn của hệ thống tệp HDFS và cung cấp thông tin chi tiết về các tệp và khối. Các tùy chọn -files và -blocks được sử dụng để chỉ định rằng chúng ta muốn thông tin về các tệp và các khối tương ứng của chúng.

Phương án A: hdfs fsck / -files -blocks - Đây là đáp án đúng. Lệnh này sẽ kiểm tra toàn bộ hệ thống tệp (bắt đầu từ thư mục gốc '/') và liệt kê thông tin về các tệp và các khối tạo nên chúng.

Phương án B: hdfs fsck / -blocks -files - Mặc dù các tùy chọn được đảo ngược, nhưng lệnh này vẫn hoạt động tương tự như phương án A. Tuy nhiên, theo quy ước và tài liệu chính thức, thứ tự thường là -files -blocks. Mặc dù không sai hoàn toàn, phương án A được ưu tiên hơn.

Phương án C: hdfs fchk / -blocks -files - Lệnh hdfs fchk không phải là một lệnh HDFS hợp lệ. Lệnh đúng là hdfs fsck.

Phương án D: hdfs fchk / -files -block - Tương tự như phương án C, hdfs fchk không phải là một lệnh HDFS hợp lệ. Hơn nữa, tùy chọn -block (số ít) không chính xác; phải là -blocks (số nhiều).

Trong Hadoop Distributed File System (HDFS), NameNode là nút trung tâm quản lý metadata (dữ liệu về dữ liệu) của hệ thống tệp tin, còn DataNode là các nút công nhân lưu trữ dữ liệu thực tế. Như vậy, DataNode tương ứng với nút công nhân và NameNode tương ứng với nút chính.

Sao chép thiếu (Under-replication) trong HDFS xảy ra khi số lượng bản sao thực tế của một khối dữ liệu nhỏ hơn so với hệ số sao chép (replication factor) được cấu hình. Điều này có nghĩa là hệ thống chưa tạo đủ số lượng bản sao như yêu cầu để đảm bảo tính sẵn sàng và độ tin cậy của dữ liệu. Các tình huống có thể dẫn đến sao chép thiếu bao gồm: DataNode bị lỗi, quá trình sao chép bị gián đoạn, hoặc DataNode mới được thêm vào cluster và chưa hoàn thành việc sao chép dữ liệu. Do đó, đáp án chính xác là D. Số lượng bản sao được tái tạo ít hơn so với quy định của hệ số sao chép.