Trong tuần trước, Microsoft tiết lộ sắp tung ra ứng dụng mới phát hành lần đầu cho SQL Server 2019, tập trung chủ yếu vào Big Data Clusters (Cụm dữ liệu lớn). Ứng dụng này cho phép triển khai các cụm mở rộng của SQL Server, Apache Spark và HDFS chạy trên Kubernetes
Visual Studio Code hiện đã được cải thiện để hỗ trợ PySpark kết hợp với Big Data Clusters trên SQL Server 2019
Hôm nay, tập đoàn công nghệ lớn đã mang đến hỗ trợ PySpark kết hợp với Big Data Clusters trên SQL Server 2019 và gửi truy vấn trong Visual Studio Code. PySpark là một Python API của Spark, cung cấp giao diện cho các cụm chương trình hoặc tính toán.
Với Apache Spark và Hive mở rộng, người dùng có thể truy cập và chỉnh sửa Python trong trình soạn thảo. Tích hợp Jupyter Notebooks cho phép nhập và xuất file dưới dạng .ipynb. Người dùng cũng có thể chạy các dòng lệnh đã chọn và trải nghiệm kết quả tương tác trực quan. Một ví dụ là vẽ đồ thị 2D thông qua matplotlib - thư viện của Python. Công việc trong PySpark có thể gửi tới Big Data Clusters trên SQL Server 2019 hoặc được soạn thảo bởi các chuyên gia dữ liệu qua Azure Data Studio. Tải công cụ Visual Studio 2019 tại đây.
Dưới đây là danh sách tóm tắt các tính năng đã được đề cập:
- Liên kết tới SQL Server: Bộ công cụ cho phép kết nối và gửi công việc PySpark tới Big Data Clusters trên SQL Server 2019. Xem cách sửa lỗi đăng nhập SQL Server thất bại
- Python editing: Phát triển ứng dụng PySpark bằng Python với các tính năng như IntelliSense, tự định dạng, phát hiện lỗi...
- Tích hợp Jupyter Notebook: Nhập và xuất file dưới dạng .ipynb.
- PySpark interactive: Chạy các dòng lệnh được chọn và tương tác trực quan.
- PySpark batch: Gửi ứng dụng PySpark tới Big Data Clusters trên SQL Server 2019.
- PySpark monitoring: Tích hợp với máy chủ Apache Spark để xem lịch sử làm việc, hiệu chỉnh lỗi, và phân tích công việc.
Để khám phá các tính năng mới này, bạn có thể tải Visual Studio Code về máy tính chạy Windows, Mac và Linux tại đây. Đối với Mac và Linux, bạn cần cài đặt thêm Mono 4.2.x. Sau đó, bạn có thể lấy công cụ Apache Spark và Hive mới nhất từ VS Code Marketplace hoặc các kho lưu trữ mở rộng.
- Tải Mono cho Mac tại đây.
Thông tin mới đáng chú ý là người dùng đã có thể chặn hình ảnh trong Gmail trên iPhone. Để thực hiện điều này, người dùng chỉ cần cập nhật phiên bản mới nhất của Gmail và thực hiện một số bước cài đặt đơn giản để chặn tính năng hiển thị hình ảnh tự động trên iPhone. Chi tiết, bạn đọc có thể xem ở phần Tin mobile trên trang web https://9mobi.vn
Đừng quên truy cập Mytour hàng ngày để cập nhật những Tin công nghệ mới nhất nhé.