CreatorFlow / Kho Repo / apache/spark

apache/spark

Apache Spark

Data & MLScala🔴 Nâng cao★ 45k

📖 Mô tả

Đây là công cụ xử lý dữ liệu lớn phân tán, có thể tính toán trên hàng tỉ dòng dữ liệu trong thời gian ngắn bằng cách chia việc cho nhiều máy. Bạn làm dữ liệu lớn có thể dùng Spark để lọc, gộp và phân tích dữ liệu từ nhiều nguồn, viết bằng Python, Java, Scala hay R đều được. Bạn cần cài Java và tải Spark về máy, việc chạy trên nhiều máy thì cần thêm máy chủ để lập cụm.

📝 Tóm tắt README

Công cụ xử lý dữ liệu lớn phân tán, có thể tính toán trên hàng tỉ dòng dữ liệu trong thời gian ngắn bằng cách chia việc cho nhiều máy. Spark cung cấp API bằng Scala, Java, Python và R, kèm công cụ truy vấn SQL, học máy MLlib, xử lý đồ thị và dữ liệu streaming theo thời gian thực. Bạn làm dữ liệu lớn có thể dùng Spark để lọc, gộp và phân tích dữ liệu từ nhiều nguồn, nhưng cần cài Java và máy chủ để lập cụm.

✨ Tính năng nổi bật

▶ Dùng thử

▶ Dùng thử:
  1. B1: Tải bản Spark trên spark.apache.org/download (cần Java)
  2. B2: Giải nén rồi chạy: ./bin/pyspark để mở giao diện thử
  3. B3: Gõ sc.parallelize([1, 2, 3]).count() để thử tính toán
Mở GitHub ↗
git clone https://github.com/apache/spark.git

🔗 Repo tương tự

← Quay lại Kho Repo