Tổng kết

Databricks với Python SDK

Avi Steinberg

Senior Software Engineer

Truy vấn mô hình AI bằng Databricks

WorkspaceClient.serving_endpoints.query()

Dùng mô hình AI chạy SQL trên dữ liệu Databricks

SQLDatabase.from_databricks(catalog, schema, warehouse_id)
SQLDatabaseToolkit(db, llm)
create_sql_agent(llm, toolkit, verbose)
agent.run("your question..")

Tạo và quản lý cụm

w.clusters.create(spark_version, cluster_name)
w.clusters.delete(cluster_id)
w.clusters.start(cluster_id)
w.clusters.get(cluster_id)

Tạo và quản lý job

w.jobs.create(
    name, 
    tasks=[
      jobs.Task(
          description,
          notebook_task=jobs.NotebookTask(notebook_path),
          task_key
          )
    ],
    schedule=jobs.CronSchedule(quartz_cron_expression,timezone_id),
    timeout_seconds, 
)

Tổng hợp mọi thứ

Job Databricks và Mô hình AI

Chúc mừng!

Databricks với Python SDK