Logo 2Slides
Preview

Giới thiệu Nền tảng Databricks — Dữ liệu, Phân tích và AI trên Một Nền tảng

47 slide

Giới thiệu Nền tảng Databricks — Tất cả Dữ liệu, Phân tích và AI của bạn trên Một Nền tảng

49 thích
0 tải xuống

Điều Hướng Nhanh

Thẻ

Databricks
Data lakehouse
Delta Lake
Apache Spark
Kỹ thuật dữ liệu

Chia sẻ slide

Mô Tả

Chủ Đề Chính

Giới thiệu Nền tảng Databricks — Tất cả Dữ liệu, Phân tích và AI của bạn trên Một Nền tảng

Lợi Ích Chính

  • •Giới thiệu toàn diện về Nền tảng Databricks Lakehouse bao gồm kỹ thuật dữ liệu, khoa học dữ liệu, ML và phân tích SQL
  • •Tiến trình trực quan rõ ràng từ các vấn đề quản lý dữ liệu đến giải pháp Lakehouse với sơ đồ kiến trúc
  • •Bao gồm toàn bộ stack: Delta Lake, Delta Live Tables, MLflow, Unity Catalog, Delta Sharing và SQL Analytics
  • •Ảnh chụp màn hình sản phẩm thực tế về các tính năng của không gian làm việc Databricks: clusters, notebooks, jobs, repos, models, queries, dashboards và alerts
  • •So sánh stack dữ liệu hiện đại so với hệ sinh thái Databricks và kiến trúc data warehouse so với data lakehouse

Đối Tượng Mục Tiêu

  • •Các kỹ sư dữ liệu đánh giá các nền tảng dữ liệu hợp nhất
  • •Các nhà khoa học dữ liệu tìm kiếm giải pháp quản lý vòng đời ML end-to-end
  • •Các nhà phân tích dữ liệu chuyển đổi từ kho dữ liệu truyền thống sang kiến trúc lakehouse
  • •Những người ra quyết định kỹ thuật so sánh Databricks với Snowflake và các stack dữ liệu hiện đại khác
  • •Các nhà lãnh đạo và kiến trúc sư CNTT lên kế hoạch chiến lược nền tảng dữ liệu đám mây

Trường Hợp Sử Dụng

  • •Các bài thuyết trình bán hàng kỹ thuật giới thiệu Databricks cho khách hàng tiềm năng
  • •Các buổi đào tạo nội bộ về khả năng của nền tảng Databricks
  • •Các cuộc họp quyết định về kiến trúc dữ liệu so sánh các phương pháp tiếp cận lakehouse so với warehouse
  • •Các buổi nói chuyện tại hội nghị về sự phát triển của nền tảng dữ liệu hiện đại
  • •Giới thiệu thành viên mới vào hệ sinh thái Databricks

Đề Xuất Giá Trị Độc Đáo

  • •Bao gồm toàn bộ nền tảng Databricks trong một bộ slide duy nhất gồm 46 slide với ảnh chụp màn hình UI thực tế
  • •Câu chuyện vấn đề-giải pháp rõ ràng: từ sự phức tạp của quản lý dữ liệu đến lakehouse hợp nhất
  • •Bao gồm cả sơ đồ kiến trúc khái niệm và hướng dẫn giao diện sản phẩm thực tế
  • •Đề cập đến cả ba đối tượng dữ liệu: Nhà phân tích dữ liệu, Kỹ sư dữ liệu và Nhà khoa học dữ liệu
  • •Thiết kế chuyên nghiệp mang thương hiệu Databricks với bảng phối màu nhất quán (xanh teal đậm, san hô, vàng)

Trang Slide (47)

Xem chi tiết từng trang slide, bao gồm bố cục, nội dung chính và các phần tử trực quan.

Trang 1
title slide

Giới thiệu về Nền tảng Databricks

Nội Dung

Trang tiêu đề — Tất cả dữ liệu, phân tích và AI của bạn trên một nền tảng. Bởi Alex Ivanichev, tháng 3 năm 2022

Cấu Trúc Bố Cục

Tiêu đề căn trái với tác giả/ngày tháng, ảnh ghép hình học ở bên phải

Phần Tử Trực Quan Chính

  • •Logo Databricks
  • •Các hình dạng hình học với ảnh nhóm
  • •Nền xanh mòng két đậm
  • •Các hình dạng điểm nhấn màu san hô/xanh mòng két
Trang 2
definition

DataBricks là gì?

Nội Dung

DataBricks là Nền tảng Dữ liệu và Phân tích hợp nhất & mở. Được xây dựng trên mã nguồn mở: Apache Spark, Delta Lake, MLflow và Koalas

Cấu Trúc Bố Cục

Văn bản căn giữa trên nền san hô với bốn logo OSS ở dưới cùng

Phần Tử Trực Quan Chính

  • •Logo Apache Spark
  • •Logo Delta Lake
  • •Logo MLflow
  • •Logo Koalas
Trang 3
agenda

Nội dung / Điều hướng

Nội Dung

Placeholder điều hướng trực quan hiển thị các phần chính của bản trình bày

Cấu Trúc Bố Cục

Bố cục agenda đơn giản

Phần Tử Trực Quan Chính

  • •Các chỉ báo phần
Trang 4
section divider

Quản lý dữ liệu ngày nay trông như thế nào?

Nội Dung

Phần chia giới thiệu trạng thái hiện tại của các thách thức quản lý dữ liệu

Cấu Trúc Bố Cục

Văn bản trắng căn giữa trên nền xanh lá cây

Phần Tử Trực Quan Chính

  • •Nền xanh lá cây
  • •Tiêu đề định dạng câu hỏi
Trang 5
architecture diagram

Độ phức tạp của quản lý dữ liệu

Nội Dung

Ba ngăn xếp riêng biệt — Kho dữ liệu, Kỹ thuật dữ liệu, Khoa học dữ liệu/ML — với các hệ thống bị ngắt kết nối và định dạng độc quyền. Hiển thị các luồng ETL giữa kho dữ liệu, data lake, streaming và các pipeline ML

Cấu Trúc Bố Cục

Tiêu đề ba cột với sơ đồ luồng kiến trúc bên dưới

Phần Tử Trực Quan Chính

  • •Ba biểu tượng persona
  • •Các mũi tên luồng ETL
  • •Logo công cụ: Redshift, Snowflake, BigQuery, Hadoop, Spark, TensorFlow, v.v.
Trang 6
concept diagram

Các Nhóm Dữ liệu Hiện đại

Nội Dung

Sơ đồ hình tam giác hiển thị ba vai trò chính trong các nhóm dữ liệu hiện đại: Nhà phân tích dữ liệu, Kỹ sư dữ liệu và Nhà khoa học dữ liệu

Cấu Trúc Bố Cục

Hình tam giác căn giữa với các biểu tượng vai trò ở mỗi đỉnh

Phần Tử Trực Quan Chính

  • •Hình tam giác lồng vào nhau (san hô, xanh mòng két, vàng)
  • •Ba biểu tượng vai trò
  • •Nền màu be sạch
Trang 7
comparison

Data Warehouse so với Data Lake

Nội Dung

So sánh trực quan giữa Kho dữ liệu (có cấu trúc, biểu tượng cơ sở dữ liệu) so với Data Lake (phi cấu trúc, biểu tượng sóng)

Cấu Trúc Bố Cục

Hai biểu tượng lớn cạnh nhau với nhãn

Phần Tử Trực Quan Chính

  • •Biểu tượng hình trụ cơ sở dữ liệu (đỏ)
  • •Biểu tượng sóng data lake (đỏ)
  • •Huy hiệu kim cương vs.
Trang 8
comparison

Warehouses và lakes tạo ra sự phức tạp

Nội Dung

Ba khía cạnh của sự phức tạp: hai bản sao dữ liệu riêng biệt (Độc quyền so với Mở), các giao diện không tương thích (SQL so với Python), các mô hình bảo mật/quản trị không tương thích (Bảng so với Tệp)

Cấu Trúc Bố Cục

Ba hàng so sánh với các cột kho dữ liệu so với data lake

Phần Tử Trực Quan Chính

  • •Ba bảng so sánh được gắn nhãn
  • •Văn bản màu đỏ cho nhãn vấn đề
  • •Bố cục tối giản sạch sẽ
Trang 9
architecture diagram

Data Lakehouse

Nội Dung

Một nền tảng để thống nhất tất cả dữ liệu, phân tích và khối lượng công việc AI. Kết hợp Kho dữ liệu và Data Lake thành một lớp duy nhất hỗ trợ Streaming Analytics, BI, Khoa học dữ liệu và Machine Learning

Cấu Trúc Bố Cục

Sơ đồ kiến trúc căn giữa với luồng dữ liệu từ cả kho dữ liệu và data lake vào lớp hợp nhất

Phần Tử Trực Quan Chính

  • •Lớp dữ liệu hợp nhất với các biểu tượng nhị phân/bánh răng
  • •Bốn loại khối lượng công việc ở trên cùng
  • •Các biểu tượng nguồn dữ liệu ở dưới cùng
  • •Các mũi tên chevron màu cam
Trang 10
comparison

Tại sao nên chọn Databricks?

Nội Dung

So sánh song song giữa Modern Data Stack (Fivetran → Airflow → dbt → Snowflake → Looker/Tableau) so với Hệ sinh thái Databricks (Fivetran + 100 công cụ → Object Storage → Auto Ingest → Delta + Spark → Delta Live Tables → Databricks SQL)

Cấu Trúc Bố Cục

So sánh luồng dọc hai cột

Phần Tử Trực Quan Chính

  • •Logo công cụ: Fivetran, Airflow, dbt, Snowflake, Looker, Tableau
  • •Luồng hệ sinh thái Databricks
  • •Kiểu tiêu đề vẽ tay
Trang 11
architecture diagram

Data Lakehouse mang đến một con đường tốt hơn

Nội Dung

Ngăn xếp kiến trúc Lakehouse: Cloud Data Lake ở dưới cùng (Azure, AWS, GCP), lưu trữ định dạng mở, xử lý dữ liệu, bảo mật/quản trị và trải nghiệm dựa trên vai trò ở trên cùng. Lợi ích: lake-first, AI/ML native, độ tin cậy cao, multi-cloud

Cấu Trúc Bố Cục

Sơ đồ kiến trúc xếp chồng ở bên trái, các dấu đầu dòng ở bên phải

Phần Tử Trực Quan Chính

  • •Ngăn xếp lớp màu xanh lá cây
  • •Logo nhà cung cấp Cloud
  • •Danh sách lợi ích dạng dấu đầu dòng
Trang 12
section divider

Nền tảng Data Lakehouse

Nội Dung

Phần chia cho chương Data Lakehouse Foundation

Cấu Trúc Bố Cục

Chữ trắng trên nền xanh mòng két đậm với các hình dạng hình học nhấn

Phần Tử Trực Quan Chính

  • •Nền xanh mòng két đậm
  • •Hình dạng hình học màu san hô/xanh mòng két
  • •Biểu tượng Databricks
Trang 13
product overview

Delta Lake

Nội Dung

Delta Lake kết nối Data Lake và Data Warehouse — một cách tiếp cận mở cho quản lý và quản trị dữ liệu. Các lợi ích chính: độ tin cậy tốt hơn với các giao dịch, xử lý nhanh hơn 48 lần với lập chỉ mục, kiểm soát truy cập chi tiết

Cấu Trúc Bố Cục

Bố cục ba cột: Biểu tượng Data Lake | Logo Delta Lake + lợi ích | Biểu tượng Data Warehouse

Phần Tử Trực Quan Chính

  • •Logo hình tam giác Delta Lake
  • •Biểu tượng sóng Data Lake
  • •Biểu tượng hình trụ Data Warehouse
  • •Các tấm bên màu xanh mòng két đậm
Trang 14
feature list

Delta Lake là gì?

Nội Dung

Dự án mã nguồn mở cho kiến trúc Lakehouse trên data lake. Lớp lưu trữ với các giao dịch ACID cho Spark. Các tính năng chính: Giao dịch ACID, Siêu dữ liệu có thể mở rộng, Time Travel, Định dạng mở, Change Data Feed, Batch/Streaming hợp nhất, Thực thi/Phát triển lược đồ, Lịch sử kiểm tra

Cấu Trúc Bố Cục

Tiêu đề với các dấu đầu dòng trong hai cột

Phần Tử Trực Quan Chính

  • •Danh sách dấu đầu dòng tính năng hai cột
  • •Liên kết tham khảo blog
Trang 15
problem-solution

Delta Lake giải quyết các thách thức với data lakes

Nội Dung

Ba thách thức được giải quyết: Độ tin cậy & Chất lượng → Giao dịch ACID, Hiệu suất & Độ trễ → Lập chỉ mục & bộ nhớ đệm nâng cao, Quản trị → Quản trị với Danh mục dữ liệu

Cấu Trúc Bố Cục

Ba hàng với các mũi tên từ thách thức đến giải pháp

Phần Tử Trực Quan Chính

  • •Nhãn danh mục in đậm màu xanh mòng két
  • •Đầu nối mũi tên
  • •Bố cục tối giản sạch sẽ
Trang 16
technical detail

Tính năng quan trọng của Delta Lake - Giao dịch ACID

Nội Dung

Cấu trúc nhật ký giao dịch: Thêm Tệp, Xóa Tệp, Cập nhật Siêu dữ liệu, Đặt Giao dịch, Thay đổi Giao thức, Cam kết Thông tin. Hiển thị thư mục _delta_log với các cam kết JSON và các thao tác thêm/xóa tệp parquet

Cấu Trúc Bố Cục

Danh sách dấu đầu dòng ở trên cùng, hai bảng mã/sơ đồ bên dưới

Phần Tử Trực Quan Chính

  • •Sơ đồ cây tệp
  • •Cấu trúc nhật ký giao dịch
  • •Các thao tác thêm (màu xanh lá cây) và xóa (màu đỏ) được mã hóa màu
Trang 17
technical detail

Tính toán lại trạng thái với các tệp Checkpoint

Nội Dung

Delta Lake tạo các tệp checkpoint sau mỗi 10 lần commit ở định dạng Parquet. Hiển thị cấu trúc tệp checkpoint, cơ chế listFrom version và xử lý đọc/ghi đồng thời với optimistic concurrency

Cấu Trúc Bố Cục

Hai bảng sơ đồ hiển thị cấu trúc tệp và luồng đọc/ghi

Phần Tử Trực Quan Chính

  • •Cây tệp với checkpoint.parquet
  • •Logo Spark để lưu vào bộ nhớ đệm
  • •Sơ đồ truy cập đồng thời của Người dùng 1/Người dùng 2
Trang 18
architecture diagram

Xây dựng nền tảng của Lakehouse

Nội Dung

Kiến trúc huy chương Bronze-Silver-Gold: Bronze (tiếp nhận/lịch sử thô) → Silver (được lọc, làm sạch, tăng cường) → Gold (tổng hợp cấp doanh nghiệp). Nguồn: Kafka, Kinesis, CSV/JSON, Spark. Người tiêu dùng: Streaming Analytics, BI, Data Science/ML

Cấu Trúc Bố Cục

Luồng dữ liệu từ trái sang phải với ba tầng cơ sở dữ liệu

Phần Tử Trực Quan Chính

  • •Các biểu tượng cơ sở dữ liệu ba tầng (màu đồng, bạc, vàng)
  • •Logo nguồn: Kafka, Kinesis, Spark
  • •Gradient mũi tên chất lượng
Trang 19
problem statement

Nhưng thực tế không đơn giản như vậy

Nội Dung

Sơ đồ pipeline dữ liệu phức tạp trong thế giới thực cho thấy các phụ thuộc rối rắm giữa nhiều nguồn, giai đoạn xử lý và người tiêu dùng. Duy trì chất lượng và độ tin cậy ở quy mô lớn là phức tạp và dễ hỏng

Cấu Trúc Bố Cục

Sơ đồ pipeline lộn xộn với nhiều đường đứt nét giao nhau

Phần Tử Trực Quan Chính

  • •Các kết nối pipeline rối rắm
  • •Nhiều biểu tượng cơ sở dữ liệu ở mỗi giai đoạn
  • •Logo nguồn: Kafka, Kinesis
Trang 20
architecture diagram

Kỹ thuật dữ liệu hiện đại trên lakehouse

Nội Dung

Kỹ thuật dữ liệu trên Databricks Lakehouse Platform: Tiếp nhận dữ liệu → Chuyển đổi dữ liệu → Quản lý chất lượng dữ liệu → Triển khai & vận hành tự động → Khả năng quan sát, dòng dõi và khả năng hiển thị pipeline. Lập lịch & điều phối. Lưu trữ định dạng mở Delta Lake tại nền tảng

Cấu Trúc Bố Cục

Sơ đồ nền tảng phân lớp với các nguồn dữ liệu ở bên trái và người tiêu dùng ở bên phải

Phần Tử Trực Quan Chính

  • •Các khối nền tảng màu xanh mòng két phân lớp
  • •Danh sách Nguồn dữ liệu
  • •Danh sách Người tiêu dùng dữ liệu
  • •Logo Delta Lake
Trang 21
section divider

Không gian làm việc Khoa học & Kỹ thuật Dữ liệu

Nội Dung

Phần chia cho chương về các tính năng của workspace

Cấu Trúc Bố Cục

Văn bản căn giữa trên nền san hô

Phần Tử Trực Quan Chính

  • •Nền san hô
  • •Văn bản sáng màu
Trang 22
product demo

Databricks Workspaces: Clusters

Nội Dung

Clusters cung cấp tài nguyên tính toán cho khối lượng công việc Data Analytics, Data Science hoặc Data Engineering. Hiển thị giao diện người dùng cấu hình cluster với Databricks Runtime 7.5 ML, Spark 3.0.1, loại trình điều khiển Community Optimized

Cấu Trúc Bố Cục

Văn bản mô tả ở trên cùng, ảnh chụp màn hình UI toàn chiều rộng bên dưới

Phần Tử Trực Quan Chính

  • •Ảnh chụp màn hình cấu hình Databricks cluster
  • •Điều hướng thanh bên
  • •Bộ chọn phiên bản Runtime
Trang 23
product demo

Databricks Workspaces: Notebooks

Nội Dung

Giao diện web để viết và thực thi mã với các ô có thể chạy được cho các tệp, bảng, hình ảnh trực quan và văn bản tường thuật. Hiển thị notebook với nội dung chiến lược lấy mẫu và lịch sử sửa đổi

Cấu Trúc Bố Cục

Văn bản mô tả ở trên cùng, ảnh chụp màn hình notebook bên dưới

Phần Tử Trực Quan Chính

  • •Notebook UI với các ô mã
  • •Dropdown đính kèm Cluster
  • •Bảng lịch sử sửa đổi
Trang 24
product demo

Databricks Workspaces: AutoLoader

Nội Dung

Auto Loader xử lý gia tăng các tệp dữ liệu mới từ bộ nhớ đám mây (GCS, DBFS). So sánh Trước/Sau: loại bỏ thiết lập Notification Service + Message Queue + Airflow phức tạp. Bao gồm ví dụ mã Scala

Cấu Trúc Bố Cục

Mô tả, sơ đồ trước/sau và đoạn mã

Phần Tử Trực Quan Chính

  • •So sánh kiến trúc Trước/Sau
  • •Đoạn mã Scala
  • •Biểu tượng Auto Loader
  • •Danh sách định dạng được hỗ trợ
Trang 25
product demo

Databricks Workspaces: Jobs

Nội Dung

Jobs chạy notebooks theo lịch trình cho ETL, Model Building, v.v. Hiển thị quy trình làm việc DAG: Clicks_Ingest → Sessionize + Orders_Ingest → Match → Build_Features → Persist_Features + Train

Cấu Trúc Bố Cục

Văn bản mô tả ở trên cùng, sơ đồ quy trình làm việc DAG bên dưới

Phần Tử Trực Quan Chính

  • •Job DAG với nhãn thời lượng
  • •Các bước pipeline tuần tự
  • •Các nhánh song song
Trang 26
product demo

Databricks Workspaces: Delta Live Tables

Nội Dung

Framework để xác định, triển khai, kiểm tra và nâng cấp các data pipeline một cách khai báo. Hiển thị DLT pipeline UI với chế độ xem đồ thị về các phụ thuộc bảng và nhật ký sự kiện

Cấu Trúc Bố Cục

Văn bản mô tả ở trên cùng, ảnh chụp màn hình DLT pipeline toàn chiều rộng

Phần Tử Trực Quan Chính

  • •Trực quan hóa đồ thị Pipeline
  • •Bảng lược đồ bảng
  • •Nhật ký sự kiện tiến trình luồng
Trang 27
product demo

Databricks Workspaces: Repos

Nội Dung

Tích hợp cấp repository với GitHub, GitLab, Bitbucket và Azure DevOps. Các nhà phát triển có thể sao chép, quản lý các nhánh, đẩy/kéo các thay đổi trực tiếp từ workspace

Cấu Trúc Bố Cục

Văn bản mô tả ở trên cùng, ảnh chụp màn hình Repos UI với trình duyệt tệp

Phần Tử Trực Quan Chính

  • •Repos file browser UI
  • •Bộ chọn nhánh
  • •Tích hợp Git hosting
Trang 28
product demo

Databricks Workspaces: Models

Nội Dung

MLflow Model Registry để quản lý toàn bộ vòng đời của các mô hình ML. Hiển thị kiểm soát phiên bản mô hình, chuyển đổi giai đoạn (Archived, Production, Staging) và các yêu cầu đang chờ xử lý

Cấu Trúc Bố Cục

Văn bản mô tả ở trên cùng, ảnh chụp màn hình Model Registry với bảng phiên bản

Phần Tử Trực Quan Chính

  • •MLflow Model Registry UI
  • •Bảng phiên bản với các giai đoạn
  • •Trường mô tả mô hình
Trang 29
section divider

Các yêu cầu về quản trị dữ liệu đang phát triển nhanh chóng

Nội Dung

Phần chia cho chương về quản trị

Cấu Trúc Bố Cục

Văn bản căn giữa trên nền san hô

Phần Tử Trực Quan Chính

  • •Nền san hô
Trang 30
problem statement

Quản trị rất khó thực thi trên data lakes

Nội Dung

Sơ đồ hiển thị độ phức tạp: 4 loại dữ liệu (Structured, Semi-structured, Unstructured, Streaming) × 3 đám mây × các chính sách bảo mật riêng biệt × nhiều bản sao đầu ra

Cấu Trúc Bố Cục

Sơ đồ luồng từ các loại dữ liệu qua các đám mây qua bảo mật đến đầu ra

Phần Tử Trực Quan Chính

  • •Các đường luồng dữ liệu được mã hóa màu
  • •Biểu tượng đám mây (3 đám mây)
  • •Biểu tượng khóa/bảo mật
  • •Biểu tượng đầu ra tài liệu
Trang 31
problem statement

The problem is getting bigger

Nội Dung

Các doanh nghiệp cần chia sẻ và quản lý các sản phẩm dữ liệu đa dạng: Files, Dashboards, Models và Tables

Cấu Trúc Bố Cục

Bốn biểu tượng thành một hàng với nhãn

Phần Tử Trực Quan Chính

  • •Bốn biểu tượng line-art màu đỏ
  • •Bố cục tối giản, sạch sẽ
Trang 32
product overview

Unity Catalog for Lakehouse Governance

Nội Dung

Lập danh mục, tìm kiếm và khám phá tài sản dữ liệu/AI một cách tập trung. Mô hình quản trị thống nhất trên các đám mây. Tích hợp với Enterprise Data Catalogs hiện có. Chia sẻ dữ liệu trực tiếp an toàn với Delta Sharing

Cấu Trúc Bố Cục

Ảnh chụp màn hình Unity Catalog ở bên trái, bốn dấu đầu dòng ở bên phải

Phần Tử Trực Quan Chính

  • •Ảnh chụp màn hình giao diện người dùng Unity Catalog với chế độ xem lược đồ/dòng dõi
  • •Bốn dấu đầu dòng tính năng
Trang 33
architecture diagram

Delta Sharing on Databricks

Nội Dung

Giao thức mở để chia sẻ dữ liệu an toàn: Data Provider → Delta Lake Table → Delta Sharing Server → Delta Sharing Protocol → Data Recipient (Power BI, Tableau, Spark, pandas, Java)

Cấu Trúc Bố Cục

Sơ đồ luồng từ trái sang phải từ nhà cung cấp đến người nhận

Phần Tử Trực Quan Chính

  • •Biểu tượng Delta Lake Table
  • •Biểu tượng Sharing Server
  • •Logo công cụ người nhận: Power BI, Tableau, Spark, pandas, Java, Linux Foundation
Trang 34
section divider

Machine Learning Workspace

Nội Dung

Phần chia cho chương ML workspace

Cấu Trúc Bố Cục

Văn bản căn giữa trên nền xanh lá cây

Phần Tử Trực Quan Chính

  • •Nền xanh lá cây
Trang 35
comparison

ML Architecture: Data Warehouse VS Data Lakehouse

Nội Dung

So sánh song song: Data Warehouse (BI Apps → SQL Engine → Proprietary Storage) so với Data Lakehouse (ML Apps + BI Apps → Python/R + SQL Engine → Cloud Storage với các định dạng OSS: PNG, UTF-8, Parquet)

Cấu Trúc Bố Cục

Hai sơ đồ kiến trúc cạnh nhau

Phần Tử Trực Quan Chính

  • •Hai sơ đồ khối kiến trúc
  • •Định dạng lưu trữ độc quyền so với mở
  • •Đường chia màu đỏ
Trang 36
product overview

Data Science and Machine Learning

Nội Dung

Giải pháp cộng tác gốc dữ liệu cho toàn bộ vòng đời ML: Notebooks đa ngôn ngữ cộng tác → Huấn luyện/Điều chỉnh mô hình, Theo dõi/Đăng ký mô hình, Phục vụ/Giám sát mô hình, Tự động hóa/Quản trị → Open Multi-Cloud Data Lakehouse và Feature Store

Cấu Trúc Bố Cục

Sơ đồ nền tảng ba tầng xếp chồng

Phần Tử Trực Quan Chính

  • •Ba lớp nền tảng màu xanh mòng két
  • •Bốn biểu tượng vòng đời ML
  • •Logo Delta Lake ở dưới cùng
Trang 37
requirements

What Does ML Need from a Lakehouse?

Nội Dung

Bốn yêu cầu: Truy cập vào Dữ liệu phi cấu trúc (hình ảnh, văn bản, mở rộng đến petabyte), Thư viện mã nguồn mở (TensorFlow, scikit-learn, R), Phần cứng chuyên dụng (GPU, tính đàn hồi của đám mây), Quản lý vòng đời mô hình (hiện vật, dòng dõi, sản xuất)

Cấu Trúc Bố Cục

Bố cục bốn góc phần tư với các dấu đầu dòng

Phần Tử Trực Quan Chính

  • •Bốn phần được gắn nhãn
  • •Bố cục văn bản rõ ràng
Trang 38
comparison

Three Data Users

Nội Dung

Business Intelligence (SQL, công cụ BI, Big Data, Warehouse), Data Science (R, SAS, Python, phân tích thống kê, bộ dữ liệu nhỏ), Machine Learning (Python, deep learning, GPU, bộ dữ liệu lớn, dữ liệu phi cấu trúc). Phần ML được tô sáng bằng đường viền màu xanh mòng két

Cấu Trúc Bố Cục

So sánh ba cột với các biểu tượng vai trò

Phần Tử Trực Quan Chính

  • •Ba biểu tượng vai trò (nhà phân tích, nhà khoa học, kỹ sư)
  • •Đường viền tô sáng màu xanh mòng két trên cột ML
  • •Dấu chấm đỏ phân cách
Trang 39
concept explanation

How Is ML Different?

Nội Dung

ML hoạt động trên dữ liệu phi cấu trúc, yêu cầu bộ dữ liệu khổng lồ, sử dụng DataFrames mã nguồn mở (không phải SQL), xuất ra các mô hình (không phải báo cáo) và đôi khi cần phần cứng đặc biệt (GPU)

Cấu Trúc Bố Cục

Danh sách dấu đầu dòng ở bên trái, biểu tượng bánh răng/người lớn ở bên phải

Phần Tử Trực Quan Chính

  • •Biểu tượng bánh răng-người màu đỏ
  • •Các từ khóa được nhấn mạnh in đậm
  • •Đường phân chia dọc
Trang 40
concept explanation

MLOps and the Lakehouse

Nội Dung

Các công cụ mở để cả *huấn luyện* và *vận hành* các mô hình trên lakehouse. Mô hình cũng là dữ liệu. MLflow cho MLOps: theo dõi/quản lý dữ liệu mô hình, dòng dõi, đầu vào; triển khai các mô hình dưới dạng dịch vụ lakehouse

Cấu Trúc Bố Cục

Danh sách dấu đầu dòng ở bên trái, biểu tượng xe tải giao hàng ở bên phải

Phần Tử Trực Quan Chính

  • •Biểu tượng xe tải giao hàng màu đỏ
  • •MLFlow nhấn mạnh in đậm
  • •Nhấn mạnh in nghiêng vào *huấn luyện/vận hành*
Trang 41
concept explanation

Feature Stores for Model Inputs

Nội Dung

Bảng quản lý dữ liệu đầu vào mô hình có cấu trúc nhưng thiếu: dòng dõi upstream, dòng dõi downstream, tích hợp trình gọi mô hình và truy cập theo thời gian thực. Feature store giải quyết những thiếu sót này

Cấu Trúc Bố Cục

Danh sách dấu đầu dòng bên trái, biểu tượng cơ sở dữ liệu bên phải

Phần Tử Trực Quan Chính

  • •Biểu tượng cơ sở dữ liệu/feature store màu đỏ
  • •Các dấu đầu dòng lồng nhau
  • •Các chấm nhấn màu vàng
Trang 42
section divider

SQL Analytics Workspace

Nội Dung

Phần chia — Truy vấn dữ liệu data lake bằng ANSI SQL với trình soạn thảo truy vấn tích hợp, cảnh báo, trực quan hóa và bảng điều khiển tương tác

Cấu Trúc Bố Cục

Văn bản căn giữa trên nền xanh lá cây với mô tả

Phần Tử Trực Quan Chính

  • •Nền xanh lá cây
  • •ANSI SQL nhấn mạnh bằng chữ in đậm
Trang 43
product demo

Databricks Workspaces: Queries

Nội Dung

Trình soạn thảo truy vấn SQL với tự động hoàn thành, trình duyệt bảng và kết nối endpoint. Hiển thị truy vấn bộ dữ liệu taxi NYC với các gợi ý cột

Cấu Trúc Bố Cục

Văn bản mô tả ở trên cùng, ảnh chụp màn hình trình soạn thảo truy vấn bên dưới

Phần Tử Trực Quan Chính

  • •Trình soạn thảo SQL với popup tự động hoàn thành
  • •Trình duyệt lược đồ bảng
  • •Bộ dữ liệu taxi NYC
Trang 44
product demo

Databricks Workspaces: Dashboards

Nội Dung

Bảng điều khiển SQL kết hợp các hình ảnh trực quan: Doanh thu tạo ra ($16M), Số lượng bán hàng (103K), Tăng trưởng hàng tháng (13%), Giỏ hàng trung bình ($154), Bản đồ Tóm tắt khách hàng, Biểu đồ Số tiền mỗi ngày, Biểu đồ hình tròn Danh mục sản phẩm

Cấu Trúc Bố Cục

Ảnh chụp màn hình bảng điều khiển toàn chiều rộng với nhiều loại widget

Phần Tử Trực Quan Chính

  • •Thẻ KPI
  • •Bản đồ địa lý
  • •Biểu đồ chuỗi thời gian
  • •Biểu đồ hình tròn
  • •Bảng điều khiển bán hàng
Trang 45
product demo

Databricks Workspaces: Alerts

Nội Dung

Cảnh báo thông báo khi kết quả truy vấn theo lịch trình đáp ứng ngưỡng. Hiển thị giao diện người dùng tạo cảnh báo, danh sách cảnh báo với trạng thái đã kích hoạt/OK và cấu hình Cảnh báo chung với các đích đến (Pops, Platform, Test Webhook)

Cấu Trúc Bố Cục

Văn bản mô tả ở trên cùng, bốn ảnh chụp màn hình giao diện người dùng trong lưới

Phần Tử Trực Quan Chính

  • •Biểu mẫu tạo cảnh báo
  • •Danh sách cảnh báo với huy hiệu trạng thái
  • •Cấu hình cảnh báo với các đích đến
  • •Bảng thông báo có viền màu xanh lá cây
Trang 46
product demo

Databricks Workspaces: Lịch Sử Truy Vấn

Nội Dung

Lịch sử truy vấn hiển thị các truy vấn SQL được thực hiện thông qua các SQL endpoint với chi tiết thực thi: phân tích thời lượng (tối ưu hóa 35%, thực thi 64%, tìm nạp 1%), số hàng trả về, số byte đã đọc

Cấu Trúc Bố Cục

Mô tả ở trên cùng, thanh bên + danh sách truy vấn + ảnh chụp màn hình bảng chi tiết

Phần Tử Trực Quan Chính

  • •Danh sách truy vấn với dấu thời gian
  • •Popup chi tiết truy vấn với tóm tắt thực thi
  • •Thanh phân tích thời lượng
Trang 47
closing slide

Cảm ơn

Nội Dung

Trang trình bày kết thúc với thương hiệu Databricks

Cấu Trúc Bố Cục

Văn bản cảm ơn đơn giản trên nền xanh mòng két đậm với các hình dạng hình học

Phần Tử Trực Quan Chính

  • •Nền xanh mòng két đậm
  • •Các hình dạng nhấn hình học màu san hô/xanh mòng két
  • •Biểu tượng Databricks

Câu Hỏi Thường Gặp

Các câu hỏi phổ biến về slide này và nội dung trình bày cơ bản.

Nền tảng Databricks Lakehouse là gì?

Databricks là một nền tảng dữ liệu hợp nhất và mở, kết hợp những ưu điểm tốt nhất của data warehouse và data lake thành một kiến trúc Lakehouse duy nhất. Nó hỗ trợ kỹ thuật dữ liệu, khoa học dữ liệu, machine learning và SQL analytics trên một nền tảng, được xây dựng trên các công nghệ nguồn mở như Apache Spark, Delta Lake và MLflow.

Bài thuyết trình này đề cập đến những chủ đề nào?

Bộ slide 46 trang này bao gồm: các thách thức quản lý dữ liệu hiện tại, khái niệm Data Lakehouse, nền tảng Delta Lake (giao dịch ACID, checkpoints, kiến trúc medallion), các tính năng của không gian làm việc Databricks (clusters, notebooks, jobs, repos, models, Delta Live Tables, AutoLoader), quản trị dữ liệu với Unity Catalog và Delta Sharing, không gian làm việc ML và MLOps, và không gian làm việc SQL Analytics (queries, dashboards, alerts).

Bài thuyết trình này được thiết kế dành cho ai?

Bài thuyết trình này được thiết kế dành cho các kỹ sư dữ liệu, nhà khoa học dữ liệu, nhà phân tích dữ liệu và những người ra quyết định kỹ thuật muốn hiểu về nền tảng Databricks. Nó đóng vai trò như một công cụ hỗ trợ bán hàng và một nguồn tài nguyên giới thiệu mang tính giáo dục cho các nhóm đánh giá hoặc áp dụng Databricks.

Databricks so sánh với modern data stack như thế nào?

Bài thuyết trình bao gồm một so sánh trực tiếp cho thấy modern data stack yêu cầu nhiều công cụ riêng biệt (Fivetran, Airflow, dbt, Snowflake, Looker, Tableau), trong khi hệ sinh thái Databricks hợp nhất chúng thành một nền tảng thống nhất với Auto Ingest, Delta + Spark, Delta Live Tables và Databricks SQL.

Delta Lake là gì và tại sao nó lại quan trọng?

Delta Lake là một lớp lưu trữ nguồn mở mang các giao dịch ACID, khả năng xử lý metadata có thể mở rộng và xử lý hàng loạt/streaming hợp nhất vào data lake. Nó cung cấp khả năng xử lý dữ liệu nhanh hơn 48 lần với indexing, time travel để kiểm soát phiên bản dữ liệu, thực thi schema và kiểm soát truy cập chi tiết — làm cho data lake đáng tin cậy như data warehouse.

Mẫu này có bao gồm ảnh chụp màn hình sản phẩm thực tế không?

Có, bài thuyết trình bao gồm ảnh chụp màn hình UI Databricks xác thực cho clusters, notebooks, AutoLoader, jobs, Delta Live Tables, repos, MLflow Model Registry, SQL queries, dashboards, alerts, query history và Unity Catalog — cung cấp một cái nhìn thực tế về trải nghiệm nền tảng.

Tôi có thể tùy chỉnh bài thuyết trình này cho mục đích sử dụng của riêng mình không?

Có, tệp PPTX hoàn toàn có thể chỉnh sửa được. Bạn có thể cập nhật dữ liệu, thêm ngữ cảnh công ty của bạn, sửa đổi sơ đồ kiến trúc và tùy chỉnh nội dung cho đối tượng cụ thể của bạn — cho dù là cho bản demo bán hàng, đào tạo nội bộ hay thuyết trình kỹ thuật.

Databricks hỗ trợ những nhà cung cấp đám mây nào?

Databricks là multi-cloud và hoạt động với Microsoft Azure, AWS và Google Cloud. Bài thuyết trình nêu bật khả năng multi-cloud này như một lợi thế chính, với dữ liệu của bạn được lưu trữ trong data lake đám mây của riêng bạn bằng các định dạng mở.

2slides

Create Your Own Slides

Turn your ideas into professional presentations in seconds with 2slides AI.

Tạo Slide Đẳng Cấp Thế Giới Trong Vài Giây

Tham khảo thiết kế chuyên nghiệp, chọn phong cách của bạn và tạo slide với kết xuất văn bản hoàn hảo. Được hỗ trợ bởi Nano Banana—bắt đầu tạo trình bày của bạn ngay bây giờ.

2Slides logo

Đại Lý AI Của Bạn Cho Slide. Tiết kiệm thời gian, tỏa sáng nhanh hơn với việc tạo bài thuyết trình thông minh.

Tóm tắt bằng AI

ChatGPTClaudeGrokPerplexity
Tất cả dịch vụ đang hoạt động

Sản phẩm

Tính năng

Thư viện

Mẫu

Tích hợp

Tài nguyên

So sánh

© 2026 2slides. Bảo lưu mọi quyền.