Khi ghi dữ liệu vào HDFS, điều gì là đúng nếu hệ số nhân bản là ba? (Chọn 2 câu trả lời) Dữ liệu được ghi vào DataNodes trên ba giá đỡ riêng biệt (nếu Rack Aware) Dữ liệu được lưu trữ trên mỗi DataNode bằng một tệp riêng biệt chứa checksum Dữ liệu được ghi vào các khối trên ba DataNodes khác nhau Khách hàng được trả lại thành công khi ghi thành công khối đầu tiên và kiểm tra tổng kiểm tra

Lệnh để kiểm tra xem Hadoop có hoạt động hay không là:

Lời giải:

Đáp án đúng: B

Lệnh `jps` (Java Virtual Machine Process Status Tool) được sử dụng để liệt kê các tiến trình JVM đang chạy trên hệ thống. Trong môi trường Hadoop, `jps` có thể được sử dụng để kiểm tra xem các tiến trình quan trọng của Hadoop như NameNode, DataNode, ResourceManager, NodeManager có đang chạy hay không. Do đó, `jps` là một cách để kiểm tra xem Hadoop có hoạt động hay không.

Các lựa chọn khác:
- `jsp`: Không phải là một lệnh tiêu chuẩn hoặc công cụ liên quan đến Hadoop.
- `Hadoop fs -test`: Lệnh này được sử dụng để kiểm tra sự tồn tại của một tệp hoặc thư mục trong hệ thống tệp Hadoop (HDFS), chứ không phải để kiểm tra trạng thái hoạt động của Hadoop.
- `Không có`: Vì `jps` có thể được sử dụng để kiểm tra trạng thái hoạt động của Hadoop, nên phương án này không đúng.

Câu 15:

Lệnh "hadoop fs -test -z URI" cho kết quả 0 nếu:

Lời giải:

Đáp án đúng: D

Lệnh `hadoop fs -test -z URI` được sử dụng để kiểm tra xem một tệp có độ dài bằng 0 hay không. Nếu tệp tại đường dẫn URI có độ dài bằng 0, lệnh sẽ trả về mã trả về là 0. Nếu không, nó sẽ trả về một mã khác 0.

* A. nếu đường dẫn là một thư mục: Lệnh này không kiểm tra xem đường dẫn có phải là thư mục hay không.
* B. nếu đường dẫn là một tệp: Lệnh này kiểm tra đường dẫn là một tệp và có độ dài bằng 0 hay không.
* C. nếu đường dẫn không trống: Lệnh này kiểm tra xem tệp có trống hay không, không phải là không trống.
* D. nếu tệp có độ dài bằng 0: Đây là đáp án chính xác. Lệnh `hadoop fs -test -z URI` trả về 0 nếu tệp có độ dài bằng 0.

Câu 16:

Mô tả cách thức một client đọc dữ liệu trên HDFS:

Lời giải:

Đáp án đúng: D

Đáp án đúng là B.

Quá trình đọc dữ liệu trên HDFS diễn ra như sau:

1. Client gửi yêu cầu đến Namenode: Client muốn đọc một file trên HDFS, nó sẽ gửi yêu cầu đến Namenode để biết vị trí của các block (chunk) của file đó.
2. Namenode cung cấp thông tin vị trí: Namenode chứa metadata của hệ thống file, bao gồm thông tin về vị trí của tất cả các block. Namenode trả về danh sách các Datanode chứa các block cần thiết cho client.
3. Client kết nối trực tiếp đến Datanode: Client sử dụng thông tin vị trí nhận được từ Namenode để kết nối trực tiếp đến các Datanode tương ứng.
4. Đọc dữ liệu song song: Client đọc dữ liệu từ các Datanode song song để tăng tốc độ đọc. Dữ liệu được trả về cho client.

Các phương án khác không chính xác vì:

* A: Client không thông báo cho Namenode để *bắt đầu* quá trình đọc. Namenode chỉ cung cấp thông tin vị trí.
* C: Namenode không trực tiếp lấy dữ liệu từ Datanode rồi trả về cho client. Client tự kết nối và đọc.
* D: Thiếu bước quan trọng là client phải kết nối và đọc dữ liệu từ các Datanode sau khi đã biết vị trí.

Câu 17:

Mục đích của lệnh sau đây là gì:

(trainingData, testData) = dataset.randomSplit([0.8, 0.2], seed=100)

Lời giải:

Đáp án đúng: A

Lệnh `dataset.randomSplit([0.8, 0.2], seed=100)` được sử dụng để chia một tập dữ liệu (`dataset`) thành hai phần: dữ liệu huấn luyện (`trainingData`) và dữ liệu kiểm tra (`testData`).

- `[0.8, 0.2]` chỉ định tỷ lệ phần trăm của mỗi phần. Trong trường hợp này, 80% dữ liệu sẽ được sử dụng cho huấn luyện (0.8) và 20% còn lại cho kiểm tra (0.2).
- `seed=100` đảm bảo rằng việc chia dữ liệu là ngẫu nhiên nhưng có thể tái tạo được. Sử dụng cùng một giá trị `seed` sẽ luôn tạo ra cùng một kết quả chia dữ liệu, điều này hữu ích cho việc gỡ lỗi và so sánh các mô hình.

Vì vậy, mục đích chính của lệnh này là chia dữ liệu thành hai tập con cho mục đích huấn luyện và đánh giá mô hình học máy.

Câu 18:

Mục đích của nút checkpoint trong cụm Hadoop là:

Lời giải:

Đáp án đúng: C

Nút Checkpoint (Checkpoint Node) trong Hadoop có nhiệm vụ chính là định kỳ hợp nhất tệp hình ảnh hệ thống tệp (FsImage) và tệp nhật ký chỉnh sửa (Edit Logs) thành một FsImage mới. Quá trình này giúp giảm kích thước của Edit Logs và rút ngắn thời gian khởi động lại của NameNode. Checkpoint Node không hoạt động như một bản sao dự phòng (standby) hoàn toàn của NameNode, mà chỉ thực hiện việc tạo checkpoint định kỳ. Do đó, đáp án C là chính xác nhất.

Các đáp án khác không đúng vì:
- A: Kiểm tra xem NameNode có hoạt động không là nhiệm vụ của các công cụ giám sát hệ thống, không phải của Checkpoint Node.
- B: Checkpoint Node không đồng bộ hóa tệp hình ảnh giữa NameNode và NameNode phụ (Standby NameNode, trong cấu hình High Availability).
- D: Kiểm tra các DataNode không thể truy cập là nhiệm vụ của NameNode, không phải của Checkpoint Node.

Câu 19:

Khi một máy được khai báo là datanode, dung lượng ổ đĩa trong đó:

Lời giải: