Điều gì là đúng về HDFS?

Điều nào sau đây không phải là mục tiêu của HDFS?

Lời giải:

Đáp án đúng: C

HDFS (Hadoop Distributed File System) là một hệ thống tệp phân tán được thiết kế để lưu trữ và xử lý các tập dữ liệu lớn trên các cụm máy tính commodity. Các mục tiêu chính của HDFS bao gồm:

* Phát hiện lỗi và khôi phục: HDFS được thiết kế để chịu lỗi. Nó tự động phát hiện lỗi và khôi phục dữ liệu từ các bản sao.
* Xử lý tập dữ liệu khổng lồ: HDFS có thể xử lý các tập dữ liệu có kích thước lên đến hàng petabyte.
* Cung cấp băng thông mạng cao để di chuyển dữ liệu: HDFS được thiết kế để cung cấp băng thông mạng cao để di chuyển dữ liệu giữa các nút trong cụm.

Tuy nhiên, việc ngăn chặn việc xóa dữ liệu không phải là một mục tiêu thiết kế của HDFS. HDFS không cung cấp cơ chế tích hợp để ngăn chặn người dùng hoặc ứng dụng xóa dữ liệu. Nếu cần ngăn chặn việc xóa dữ liệu, cần triển khai các biện pháp bảo mật và kiểm soát truy cập bổ sung.

Vì vậy, đáp án C là đáp án đúng.

Câu 5:

Giao tiếp giữa các quá trình giữa các nút khác nhau trong Hadoop sử dụng:

Lời giải:

Đáp án đúng: B

Trong Hadoop, giao tiếp giữa các tiến trình (processes) chạy trên các nút (nodes) khác nhau chủ yếu sử dụng RPC (Remote Procedure Call). RPC là một giao thức cho phép một chương trình trên một máy tính yêu cầu một dịch vụ từ một chương trình trên một máy tính khác trong mạng mà không cần hiểu các chi tiết mạng. Hadoop sử dụng RPC để các thành phần khác nhau như NameNode, DataNode, ResourceManager, NodeManager, và các ứng dụng MapReduce có thể giao tiếp và phối hợp với nhau.

REST API thường được sử dụng cho các dịch vụ web, nơi dữ liệu được trao đổi qua HTTP sử dụng các phương thức như GET, POST, PUT, DELETE. Mặc dù REST API có thể được sử dụng trong một số trường hợp trong Hadoop, nó không phải là phương thức chính để giao tiếp giữa các tiến trình cốt lõi.

RMI (Remote Method Invocation) là một cơ chế cho phép một đối tượng Java trên một máy ảo Java (JVM) gọi các phương thức trên một đối tượng Java khác chạy trên một JVM khác. RMI chủ yếu được sử dụng trong môi trường Java, trong khi Hadoop được viết bằng Java và sử dụng RPC thay vì RMI để giao tiếp giữa các tiến trình.

IP Exchange không phải là một giao thức giao tiếp cụ thể. Giao tiếp trong mạng TCP/IP dựa trên việc trao đổi các gói tin IP, nhưng Hadoop sử dụng RPC như một giao thức ứng dụng để cấu trúc giao tiếp này.

Câu 6:

Khi bạn tăng số lượng tệp được lưu trữ trong HDFS, Bộ nhớ được yêu cầu bởi NameNode:

Lời giải:

Đáp án đúng: A

Khi số lượng tệp được lưu trữ trong HDFS tăng lên, NameNode cần lưu trữ nhiều metadata hơn về các tệp này (ví dụ: tên tệp, quyền, vị trí các khối dữ liệu). Điều này dẫn đến việc tăng bộ nhớ mà NameNode yêu cầu để quản lý các metadata này. Do đó, đáp án đúng là A.

Câu 7:

Khi NameNode nhận thấy rằng một số khối được sao chép quá mức, nó:

Lời giải:

Đáp án đúng: C

Khi NameNode phát hiện một số khối dữ liệu đang được sao chép vượt quá số lượng cần thiết (over-replicated), nó sẽ thực hiện hành động loại bỏ các bản sao thừa đó. Điều này nhằm mục đích tiết kiệm không gian lưu trữ trên các DataNode và đảm bảo rằng hệ thống HDFS hoạt động hiệu quả.

* Tại sao các lựa chọn khác sai:
* A. Dừng công việc sao chép trong toàn bộ hệ thống tệp hdfs: NameNode không dừng toàn bộ quá trình sao chép. Nó chỉ xử lý các khối đang bị sao chép quá mức.
* B. Nó làm chậm quá trình nhân bản cho các khối đó: NameNode không làm chậm quá trình nhân bản, mà sẽ loại bỏ bản sao thừa.
* D. Nó để lại các khối thừa như nó vốn có: Việc giữ lại các khối thừa sẽ gây lãng phí tài nguyên lưu trữ.

Câu 8:

Kích thước khối HDFS lớn hơn so với kích thước của các khối đĩa để:

Lời giải:

Đáp án đúng: D

Kích thước khối (block size) trong HDFS (Hadoop Distributed File System) lớn hơn kích thước khối đĩa thông thường vì những lý do sau:

Giảm chi phí tìm kiếm (seek time): Khi làm việc với các tệp tin lớn, việc giảm thiểu số lượng thao tác tìm kiếm (seek operations) là rất quan trọng để tăng hiệu suất. Kích thước khối lớn hơn giúp giảm số lượng khối cần đọc cho một tệp tin, từ đó giảm số lần tìm kiếm và tăng tốc độ đọc/ghi dữ liệu.

Quản lý metadata hiệu quả: Kích thước khối lớn hơn có nghĩa là số lượng khối cần quản lý sẽ ít hơn. Điều này làm giảm gánh nặng cho NameNode (node quản lý metadata trong HDFS), giúp NameNode có thể quản lý một lượng lớn dữ liệu hơn.

Lưu trữ các tệp tin lớn: HDFS được thiết kế để lưu trữ và xử lý các tệp tin rất lớn. Việc có kích thước khối lớn cho phép một tệp tin lớn được chia thành ít khối hơn và lưu trữ trên nhiều nút trong cụm, đảm bảo tính khả mở và chịu lỗi.

Với các lựa chọn đã cho:

A. Sai. HDFS có thể lưu trữ các loại tệp tin khác nhau, không chỉ các tệp HDFS.

B. Sai. Kích thước khối lớn hơn nhằm mục đích giảm thiểu (tối thiểu hóa) thời gian tìm kiếm, chứ không phải tối đa hóa.

C. Sai. HDFS được thiết kế để có thể chuyển các tệp lớn được tạo từ nhiều khối đĩa một cách hiệu quả.

D. Đúng. Đây là một trong những lý do chính. Kích thước khối lớn hơn cho phép lưu trữ các tệp lớn hơn kích thước của một đĩa đơn trên nhiều đĩa trong cụm.

Câu 9:

Là một phần của tính khả dụng cao HDFS, một cặp NameNode chính được cấu hình. Điều gì là đúng với họ?

Lời giải:

Bạn cần đăng ký gói VIP để làm bài, xem đáp án và lời giải chi tiết không giới hạn. Nâng cấp VIP

Câu 10:

Lệnh hadfs được sử dụng để:

Lời giải:

Bạn cần đăng ký gói VIP để làm bài, xem đáp án và lời giải chi tiết không giới hạn. Nâng cấp VIP

Câu 11:

Mục đích của việc khởi động NameNode trong chế độ khôi phục là để:

Lời giải:

Bạn cần đăng ký gói VIP để làm bài, xem đáp án và lời giải chi tiết không giới hạn. Nâng cấp VIP