AVRO là gì?

Bộ nhớ đệm phân tán là gì?

Lời giải:

Đáp án đúng: B

Bộ nhớ đệm phân tán (Distributed Cache) trong Hadoop cho phép các ứng dụng MapReduce chia sẻ các file chỉ đọc (read-only) cho tất cả các nodes trong cluster. Các file này thường được sử dụng để lưu trữ dữ liệu cấu hình, từ điển, hoặc các tài nguyên khác mà các tác vụ Map và Reduce cần. Đáp án D mô tả chính xác chức năng này: cho phép các nhà phát triển triển khai các chunk (mảnh dữ liệu) để xử lý MapReduce bằng cách sử dụng bộ nhớ đệm phân tán để cung cấp dữ liệu cần thiết cho các tác vụ Map và Reduce trên toàn cluster. Các đáp án còn lại không mô tả đúng chức năng của bộ nhớ đệm phân tán.

Câu 47:

HBase là gì?

Lời giải:

Đáp án đúng: B

HBase là một cơ sở dữ liệu NoSQL, mã nguồn mở, phân tán, có khả năng mở rộng và lưu trữ dữ liệu lớn. Nó được xây dựng trên Hadoop Distributed File System (HDFS) và cung cấp khả năng truy cập dữ liệu theo thời gian thực. HBase không cung cấp giao diện SQL đầy đủ như các hệ quản trị cơ sở dữ liệu quan hệ (RDBMS) truyền thống, mặc dù có các dự án như Phoenix cung cấp một lớp SQL trên HBase. Do đó, phương án C mô tả đúng nhất về HBase, nó cung cấp một giao diện giống như cơ sở dữ liệu để truy cập dữ liệu trên cụm Hadoop.

Câu 48:

Khi sử dụng HDFS, điều gì xảy ra khi tệp bị xóa khỏi dòng lệnh?

Lời giải:

Đáp án đúng: C

Khi một tệp bị xóa khỏi HDFS từ dòng lệnh, nếu tính năng thùng rác (trash) được bật, tệp đó sẽ được chuyển vào thư mục thùng rác riêng của người dùng đã thực hiện xóa. Điều này cho phép người dùng có cơ hội khôi phục tệp nếu cần thiết trước khi nó bị xóa vĩnh viễn sau một khoảng thời gian cấu hình sẵn. Các tùy chọn khác không chính xác vì tệp không bị xóa vĩnh viễn ngay lập tức khi thùng rác được bật, và nó không được chuyển vào thư mục thùng rác chung cho tất cả người dùng.

Câu 49:

Khi lưu trữ tệp Hadoop, câu nào sau đây là đúng? (Chọn hai câu trả lời)

Các tệp đã lưu trữ sẽ hiển thị với phần mở rộng .arc.

Nhiều tệp nhỏ sẽ trở thành ít tệp lớn hơn.

MapReduce xử lý tên tệp gốc ngay cả sau khi tệp được lưu trữ.

Các tệp đã lưu trữ phải được lưu trữ tại Liên hợp quốc cho HDFS và MapReduce để truy cập các tệp nhỏ, gốc.

Lưu trữ dành cho các tệp cần được lưu nhưng HDFS không còn truy cập được nữa.

Lời giải:

Đáp án đúng: B

Phân tích các lựa chọn:

* Các tệp đã lưu trữ sẽ hiển thị với phần mở rộng .arc. - Sai. Các tệp lưu trữ Hadoop thường có phần mở rộng `.har` (Hadoop Archive).
* Nhiều tệp nhỏ sẽ trở thành ít tệp lớn hơn. - Đúng. Mục đích chính của việc lưu trữ là giảm số lượng tệp nhỏ trong HDFS, giúp cải thiện hiệu suất.
* MapReduce xử lý tên tệp gốc ngay cả sau khi tệp được lưu trữ. - Đúng. Khi một tệp được lưu trữ, MapReduce vẫn có thể truy cập nó bằng tên gốc của nó.
* Các tệp đã lưu trữ phải được lưu trữ tại Liên hợp quốc cho HDFS và MapReduce để truy cập các tệp nhỏ, gốc. - Sai. Câu này không có nghĩa và không liên quan đến khái niệm lưu trữ tệp Hadoop.
* Lưu trữ dành cho các tệp cần được lưu nhưng HDFS không còn truy cập được nữa. - Sai. Lưu trữ là một cách để tổ chức và quản lý các tệp nhỏ vẫn còn cần thiết và truy cập được trong HDFS.

Vậy, hai câu trả lời đúng là: "Nhiều tệp nhỏ sẽ trở thành ít tệp lớn hơn." và "MapReduce xử lý tên tệp gốc ngay cả sau khi tệp được lưu trữ."

Do đó, đáp án đúng là B. 2 & 3

Câu 50:

Để áp dụng một bộ kết hợp, một thuộc tính phải được thỏa mãn bởi các giá trị được phát ra từ bộ ánh xạ là gì?

Lời giải:

Đáp án đúng: C

Câu hỏi này liên quan đến việc sử dụng Combiner trong MapReduce. Combiner là một bộ giảm cục bộ chạy trên mỗi máy mapper để giảm lượng dữ liệu được truyền qua mạng đến bộ giảm. Để Combiner có thể được áp dụng một cách an toàn và hiệu quả, đầu ra của mapper và combiner phải có cùng định dạng cặp key-value. Quan trọng hơn, các giá trị phải thỏa mãn tính chất kết hợp (associative) và giao hoán (commutative). Tính chất kết hợp cho phép các phép toán được nhóm lại mà không ảnh hưởng đến kết quả, còn tính chất giao hoán cho phép thay đổi thứ tự các toán hạng mà không ảnh hưởng đến kết quả. Điều này đảm bảo rằng việc thực hiện Combiner trước khi reducer sẽ không làm thay đổi kết quả cuối cùng.

Câu 1:

Giao tiếp giữa các quá trình giữa các nút khác nhau trong Hadoop sử dụng (The inter process communication between different nodes in Hadoop uses)

Lời giải: