Which of the following are the common feature of RDD and DataFrame?
4 phương ánCó giải thích
Các phương án trả lời
Chọn một phương ánLời giảiChọn phương án để mở
Đáp án đúng: "All of the others". Trong Apache Spark, DataFrame được xây trên nền RDD (Resilient Distributed Dataset, tập dữ liệu phân tán có khả năng phục hồi) nên thừa hưởng cả ba tính chất. "Immutability" đúng: cả RDD lẫn DataFrame đều bất biến, mỗi phép biến đổi như map hay filter tạo ra đối tượng mới thay vì sửa đối tượng cũ. "In-memory" đúng: cả hai được tính toán và có thể lưu đệm (cache) trong bộ nhớ RAM của các executor, giúp nhanh hơn nhiều so với đọc ghi đĩa như MapReduce. "Resilient" đúng: khi một phân vùng bị mất do máy hỏng, Spark dựng lại nó từ lineage (chuỗi phép biến đổi đã ghi lại) mà không cần sao lưu toàn bộ dữ liệu. Vì cả ba đều là điểm chung, chọn riêng một tính chất là chưa đủ.
Cùng phần 8
Spark SQL is often used for:Có lời giảiCâu hỏiWhen the following command is executed, where is the file written and how can it be accessed?
counts.coalesce(1).saveAsTextFile(‘hdfs:/user/udera/wordcount/outputDir’)Có lời giảiCâu hỏiWhat is the primary purpose of Spark SQL in Apache Spark?Có lời giảiCâu hỏiCả 12 câu của chủ đề12 câu
Xuất hiện trong 1 bộ đề
Đi tiếp từ đây