Hadoop sử dụng những cơ chế nào để làm cho NameNode có khả năng chống lại sự cố?

Trong Hadoop 2.x, liên kết HDFS phát hành có nghĩa là:

Lời giải:

Đáp án đúng: C

Liên kết HDFS phát hành (HDFS Federation) trong Hadoop 2.x cho phép một cụm Hadoop mở rộng quy mô bằng cách thêm nhiều NameNode hơn. Mỗi NameNode quản lý một không gian tên (namespace) riêng biệt và các DataNode đăng ký với nhiều NameNode. Điều này giúp tăng khả năng mở rộng và hiệu năng của hệ thống HDFS. Phương án A sai vì liên kết HDFS không chỉ đơn thuần là cho phép các NameNode giao tiếp với nhau, mà còn bao gồm việc phân chia không gian tên và quản lý các DataNode độc lập. Phương án B sai vì nó mô tả việc mở rộng quy mô bằng cách thêm DataNode, điều này là mở rộng dung lượng lưu trữ chứ không phải là liên kết HDFS. Phương án D sai vì nó liên quan đến việc thêm bộ nhớ vật lý, không liên quan trực tiếp đến khái niệm liên kết HDFS.

Câu 20:

Là một phần của tính khả dụng cao HDFS, một cặp NameNode chính được cấu hình. Điều gì là đúng với họ?

Lời giải:

Đáp án đúng: D

Trong cấu hình High Availability (HA) của HDFS với một cặp NameNode, một NameNode hoạt động (Active NameNode) và một NameNode chờ (Standby NameNode) được thiết lập. NameNode hoạt động chịu trách nhiệm xử lý tất cả các yêu cầu của client và quản lý không gian tên của hệ thống tệp. NameNode chờ liên tục theo dõi trạng thái của NameNode hoạt động và sẵn sàng tiếp quản vai trò nếu NameNode hoạt động gặp sự cố. NameNode chờ nhận các điểm kiểm tra định kỳ (periodic checkpoints) của không gian tên từ NameNode đang hoạt động. Điều này đảm bảo rằng NameNode chờ có một bản sao gần đây nhất của không gian tên, cho phép nó nhanh chóng tiếp quản vai trò của NameNode hoạt động trong trường hợp cần thiết. Các DataNode gửi báo cáo khối đến cả hai NameNode.

Câu 21:

Zookeeper đảm bảo rằng:

Lời giải:

Đáp án đúng: B

Zookeeper trong Hadoop đóng vai trò quan trọng trong việc quản lý và điều phối hệ thống, đặc biệt là trong cấu hình High Availability (HA) cho NameNode. Trong cấu hình HA, có hai NameNode: một active NameNode phục vụ yêu cầu của client và một standby NameNode ở trạng thái chờ. Zookeeper giám sát trạng thái của active NameNode. Nếu active NameNode bị lỗi, Zookeeper sẽ tự động kích hoạt quá trình chuyển đổi dự phòng (failover), chuyển standby NameNode thành active NameNode. Điều này đảm bảo rằng luôn chỉ có một NameNode duy nhất hoạt động để tránh xung đột và đảm bảo tính nhất quán của dữ liệu. Các lựa chọn khác không mô tả đúng vai trò của Zookeeper. Phương án A sai vì Zookeeper đảm bảo chỉ có *một* NameNode active. Phương án C sai vì chuyển đổi dự phòng được kích hoạt khi *NameNode* active bị lỗi, không phải DataNode. Phương án D sai vì quản trị viên vẫn có thể can thiệp vào quá trình chuyển đổi dự phòng, mặc dù Zookeeper tự động thực hiện nó.

Câu 22:

Theo Tính khả dụng cao của Hadoop, nghĩa là Hàng rào:

Lời giải:

Đáp án đúng: D

Tính khả dụng cao (High Availability - HA) trong Hadoop có nghĩa là hệ thống có thể tiếp tục hoạt động ngay cả khi một thành phần bị lỗi. Hàng rào (Fencing) là một cơ chế quan trọng trong HA để đảm bảo rằng chỉ có một NameNode hoạt động (Active NameNode) tại một thời điểm. Điều này ngăn chặn tình trạng "split-brain" khi cả hai NameNode cùng hoạt động và ghi vào nhật ký chỉnh sửa (edit logs), gây ra sự không nhất quán dữ liệu. * **Phương án A:** Ngăn NameNode hoạt động trước đó bắt đầu chạy lại. - Đúng, hàng rào đảm bảo NameNode cũ không can thiệp vào NameNode mới đang hoạt động. * **Phương án B:** Ngăn chặn việc bắt đầu chuyển đổi dự phòng trong trường hợp mạng bị lỗi với NameNode hoạt động. - Sai, hàng rào không ngăn chặn chuyển đổi dự phòng. Nó đảm bảo chuyển đổi diễn ra an toàn. * **Phương án C:** Ngăn chặn sự cố sập nguồn đối với NameNode đã hoạt động trước đó. - Sai, hàng rào không thể ngăn chặn sự cố sập nguồn. * **Phương án D:** Ngăn không cho NameNode đã hoạt động trước đó ghi vào nhật ký chỉnh sửa. - Đúng, đây là mục đích chính của hàng rào. Do đó, phương án A và D đều đúng, tuy nhiên phương án D mô tả chính xác và đầy đủ hơn về cơ chế hàng rào, đó là ngăn NameNode cũ ghi vào nhật ký chỉnh sửa để tránh xung đột dữ liệu. Vì vậy, đáp án chính xác nhất là D.

Câu 23:

Cơ chế nào sau đây không phải là cơ chế hàng rào cho NameNode đã hoạt động trước đó?

Lời giải:

Đáp án đúng: C

Câu hỏi này liên quan đến cơ chế hàng rào (fencing) trong hệ thống phân tán, cụ thể là đối với NameNode trong Hadoop. Hàng rào là một kỹ thuật để đảm bảo chỉ có một NameNode hoạt động tại một thời điểm, ngăn ngừa tình trạng "split-brain" (hai node cùng hoạt động và ghi dữ liệu, gây xung đột). Các phương án A, B, và D đều là các cơ chế hàng rào hợp lệ:

A. Tắt cổng mạng thông qua lệnh quản lý từ xa: Ngắt kết nối mạng của NameNode cũ, khiến nó không thể giao tiếp và do đó không thể ghi dữ liệu.
B. Thu hồi quyền truy cập vào thư mục lưu trữ được chia sẻ: Ngăn NameNode cũ truy cập và ghi vào thư mục lưu trữ dữ liệu chung.
D. STONITH (Shoot The Other Node In The Head): Cơ chế này sử dụng phần cứng hoặc phần mềm để tắt hoàn toàn NameNode cũ.

Phương án C (Định dạng ổ đĩa của nó) không phải là cơ chế hàng rào thông thường. Việc định dạng ổ đĩa là một hành động phá hủy dữ liệu và thường không được sử dụng làm cơ chế hàng rào vì nó không an toàn và có thể gây mất dữ liệu. Thay vào đó, các cơ chế hàng rào tập trung vào việc ngăn NameNode cũ hoạt động mà không nhất thiết phải phá hủy dữ liệu của nó ngay lập tức.

Câu 24:

Đối với thư mục HDFS, hệ số sao chép (RF) là:

Lời giải: