Thuộc tính nào dưới đây được định cấu hình trên mapred-site.xml?

Yếu tố nhân rộng

Tên thư mục để lưu trữ tệp HDFS

Máy chủ và cổng nơi tác vụ MapReduce chạy

Các biến môi trường Java

Trả lời:

Đáp án đúng: C

Tệp mapred-site.xml trong Hadoop được sử dụng để cấu hình các thuộc tính liên quan đến MapReduce. Trong số các lựa chọn được đưa ra:

A. Yếu tố nhân rộng: Yếu tố nhân rộng thường liên quan đến HDFS và được cấu hình trong hdfs-site.xml.
B. Tên thư mục để lưu trữ tệp HDFS: Tên thư mục lưu trữ tệp HDFS cũng được cấu hình trong hdfs-site.xml.
C. Máy chủ và cổng nơi tác vụ MapReduce chạy: Đây là thuộc tính chính được cấu hình trong mapred-site.xml. Nó chỉ định địa chỉ và cổng của JobTracker (Hadoop 1.x) hoặc ResourceManager (Hadoop 2.x+), nơi các tác vụ MapReduce được gửi và quản lý.
D. Các biến môi trường Java: Các biến môi trường Java thường được cấu hình trong hadoop-env.sh hoặc mapred-env.sh.

Do đó, đáp án đúng là C.

100+ câu hỏi trắc nghiệm Dữ liệu lớn giải thích chi tiết từng câu - Phần 2

50 câu hỏi 60 phút

Bắt đầu thi

Câu hỏi liên quan

Câu 35:

Các khối dữ liệu ánh xạ thông tin với các tệp tương ứng của chúng được lưu trữ trong

Lời giải:

Đáp án đúng: D

Đáp án đúng: D. NameNode

Giải thích:

Trong Hadoop Distributed File System (HDFS), NameNode là trung tâm quản lý hệ thống tệp. Nó lưu trữ metadata về hệ thống tệp, bao gồm:

Tên tệp và thư mục.

Quyền truy cập.

Ánh xạ giữa các khối dữ liệu (data blocks) và các DataNode nơi chúng được lưu trữ.

DataNode là các nút (nodes) lưu trữ dữ liệu thực tế. NameNode biết DataNode nào đang lưu trữ khối dữ liệu nào của tệp, cho phép HDFS truy cập dữ liệu một cách hiệu quả. Trình theo dõi công việc (Job Tracker) và trình theo dõi tác vụ (Task Tracker) liên quan đến MapReduce, một mô hình lập trình để xử lý song song các tập dữ liệu lớn, không phải là nơi lưu trữ metadata về ánh xạ khối dữ liệu.

Câu 36:

NameNode biết rằng DataNode đang hoạt động bằng cách sử dụng một cơ chế được gọi là

Lời giải:

Đáp án đúng: A

NameNode biết DataNode đang hoạt động thông qua cơ chế heartbeat. DataNode định kỳ gửi tín hiệu heartbeat đến NameNode để báo cáo trạng thái của nó. Nếu NameNode không nhận được heartbeat từ DataNode trong một khoảng thời gian nhất định, nó sẽ đánh dấu DataNode là đã chết và sẽ không giao bất kỳ tác vụ mới nào cho DataNode đó.

Câu 37:

Trong Hadoop, Snappy và LZO là những ví dụ về

Lời giải:

Đáp án đúng: B

Snappy và LZO là các thư viện nén dữ liệu được sử dụng trong Hadoop để giảm kích thước dữ liệu lưu trữ và tăng tốc độ truyền dữ liệu. Chúng là các codec nén thường được sử dụng để nén các file dữ liệu lớn trong Hadoop.

Câu 38:

Khi một JobTracker lên lịch, một công việc sẽ được tìm kiếm đầu tiên ở

Lời giải:

Đáp án đúng: A

Khi JobTracker lên lịch một công việc trong Hadoop, nó ưu tiên locality (tính cục bộ) của dữ liệu. Điều này có nghĩa là nó sẽ cố gắng lên lịch các tác vụ (tasks) gần với dữ liệu mà chúng cần xử lý nhất có thể.

DataNode là nơi lưu trữ dữ liệu. Rack là một tập hợp các nút trong cùng một trung tâm dữ liệu. Việc đưa tác vụ đến cùng rack với DataNode sẽ giảm thiểu độ trễ mạng và tăng tốc độ xử lý dữ liệu. Việc ưu tiên nút có vị trí trống trong cùng giá đỡ với DataNode là nỗ lực tốt nhất để đạt được locality, đồng thời đảm bảo có đủ tài nguyên để thực hiện công việc.

Vì vậy, đáp án chính xác là A.

Câu 39:

Tín hiệu nhịp tim được gửi từ

Lời giải:

Đáp án đúng: B

Tín hiệu nhịp tim (heartbeat signal) trong Hadoop được sử dụng để TaskTracker thông báo cho JobTracker biết rằng nó vẫn đang hoạt động và có thể thực hiện các tác vụ. Nếu JobTracker không nhận được tín hiệu nhịp tim từ một TaskTracker trong một khoảng thời gian nhất định, nó sẽ coi TaskTracker đó là đã chết và sẽ lên lịch lại các tác vụ được giao cho TaskTracker đó cho các TaskTracker khác.

Câu 40:

Cái nào không phải là một trong những đặc điểm của dữ liệu lớn?

Lời giải: