Các lệnh Hadoop Shell hữu ích



Blog này mô tả về tất cả các lệnh Hadoop Shell hữu ích. Cùng với Hadoop Shell Commands, nó cũng có ảnh chụp màn hình để giúp việc học trở nên đơn giản. Đọc tiếp!

HDFS là viết tắt của ‘ H bám vào D được phân bổ F với S ystem ’. HDFS là một dự án con của dự án Apache Hadoop. Dự án Apache Software Foundation này được thiết kế để cung cấp một hệ thống tệp có khả năng chịu lỗi được thiết kế để chạy trên phần cứng hàng hóa. HDFS được truy cập thông qua một tập hợp các lệnh shell sẽ được thảo luận trong bài đăng này.





Một lưu ý ngắn trước khi bắt đầu: Tất cả các lệnh Hadoop Shell đều được gọi bởi tập lệnh bin / hadoop.

Lệnh người dùng:

  • Chạy hệ thống tệp DFS:

Cách sử dụng: hadoop fsck - /



Run-DFS-file-system (1)

  • C phiên bản heck của Hadoop :

Cách sử dụng: Phiên bản Hadoop



Lệnh FS Shell:

Lệnh Hadoop fs chạy một máy khách người dùng hệ thống tệp chung tương tác với hệ thống tệp MapR (MapR-FS).

  • Xem danh sách tệp:

Cách sử dụng: hadoop fs -ls hdfs: /

  • Kiểm tra trạng thái bộ nhớ:

Cách sử dụng: hadoop fs -df hdfs: /

  • Số lượng thư mục, tệp và byte trong đường dẫn và mẫu tệp được chỉ định:

Cách sử dụng: hadoop fs -count hdfs: /

  • Di chuyển tệp từ vị trí này sang vị trí khác:

Cách sử dụng: -mv

  • Sao chép tệp từ nguồn đến đích :

Cách sử dụng: -cp

  • Xóa tài liệu:

Cách sử dụng: -rm

  • Đặt tệp từ hệ thống tệp cục bộ sang Hệ thống tệp phân tán Hadoop:

Cách sử dụng: -put…

  • Sao chép tệp từ Cục bộ sang HDFS:

Cách sử dụng: -copyFromLocal…

  • Xem tệp trong hệ thống Tệp phân tán Hadoop :

Cách sử dụng: -cat

Lệnh quản trị:

  • Định dạng mục đích :

Cách sử dụng: hadoop mục đích-định dạng

  • Bắt đầu Mục đích phụ:

Cách sử dụng: hadoop secondrynamenode

  • Chạy có mục đích :

Cách sử dụng: mục đích hadoop

  • Chạy nút dữ liệu :

Cách sử dụng: nút dữ liệu hadoop

  • Cân bằng cụm :

Cách sử dụng: cân bằng hadoop

  • Chạy nút theo dõi công việc MapReduce:

Cách sử dụng: trình theo dõi công việc hadoop

cách thiết lập java classpath

  • Chạy nút theo dõi tác vụ MapReduce:

Cách sử dụng: hadoop tasktracker

Có một câu hỏi cho chúng tôi? Vui lòng đề cập đến chúng trong phần nhận xét và chúng tôi sẽ liên hệ lại với bạn.

Bài viết liên quan:

Các toán tử trong Apache Pig