dbt artifacts parser Download - dbt artifacts parser Source Source Download

dbt artifacts parser

โค้ดแหล่งที่มา AI

v0.8.1

ดาวน์โหลด

dbt-artifacts-parser

นี่คือสิ่งประดิษฐ์ DBT แยกวิเคราะห์ใน Python มันช่วยให้เราสามารถจัดการกับ catalog.json , manifest.json , run-results.json และ sources.json เป็นวัตถุ Python

แพ็คเกจนี้ได้รับการออกแบบมาเป็นหลักสำหรับ DBT-core ทำให้สามารถมีปฏิสัมพันธ์กับสิ่งประดิษฐ์ DBT เป็นวัตถุ Python ได้อย่างไร้รอยต่อ ในขณะที่ DBT Cloud จัดเตรียมประเภทสิ่งประดิษฐ์เพิ่มเติมนอกเหนือจาก DBT-Core แต่แพ็คเกจนี้ไม่ได้ให้การสนับสนุนที่ครอบคลุมสำหรับพวกเขา

รุ่นที่รองรับและความเข้ากันได้

หมายเหตุสำคัญ:
Pydantic V1 จะไม่ได้รับการสนับสนุนสำหรับ DBT 1.9 หรือใหม่กว่า
หากต้องการแยกวิเคราะห์ DBT 1.9 หรือใหม่กว่าโปรดย้ายรหัสของคุณไปที่ Pydantic V2
เราจะประเมินความเข้ากันได้ของรุ่นใหม่เมื่อเปิดตัว Pydantic V3

รุ่น	เวอร์ชัน DBT ที่รองรับ	รุ่น Pydantic ที่รองรับ
0.8	DBT 1.5 ถึง 1.9	Pydantic v2
0.7	DBT 1.5 ถึง 1.8	Pydantic v2
0.6	DBT 1.5 ถึง 1.8	Pydantic V1
0.5	DBT 1.5 ถึง 1.7	Pydantic V1

การติดตั้ง

pip install -U dbt-artifacts-parser

ชั้นเรียน Python

นี่คือชั้นเรียนที่แยกวิเคราะห์สิ่งประดิษฐ์ DBT

แคตตาล็อก

CATALOGV1 สำหรับ CATALOG.JSON V1

ประจักษ์

manifestv1 สำหรับ manifest.json v1
manifestv2 สำหรับ manifest.json v2
manifestv3 สำหรับ manifest.json v3
manifestv4 สำหรับ manifest.json v4
manifestv5 สำหรับ manifest.json v5
manifestv6 สำหรับ manifest.json v6
manifestv7 สำหรับ manifest.json v7
manifestv8 สำหรับ manifest.json v8
manifestv9 สำหรับ manifest.json v9
manifestv10 สำหรับ manifest.json v10
manifestv11 สำหรับ manifest.json v11
manifestv12 สำหรับ manifest.json v12

รันผลลัพธ์

runresultsv1 สำหรับ run_results.json v1
runresultsv2 สำหรับ run_results.json v2
runresultsv3 สำหรับ run_results.json v3
runresultsv4 สำหรับ run_results.json v4
runresultsv5 สำหรับ run_results.json v5
runresultsv6 สำหรับ run_results.json v6

แหล่งกำเนิด

Sourcesv1 สำหรับแหล่งที่มา json v1
Sourcesv2 สำหรับแหล่งที่มา json v2
Sourcesv3 สำหรับแหล่งที่มา json v3

ตัวอย่าง

แยกวิเคราะห์แคตตาล็อก

 import json

# parse any version of catalog.json
from dbt_artifacts_parser . parser import parse_catalog

with open ( "path/to/catalog.json" , "r" ) as fp :
    catalog_dict = json . load ( fp )
    catalog_obj = parse_catalog ( catalog = catalog_dict )

# parse catalog.json v1
from dbt_artifacts_parser . parser import parse_catalog_v1

with open ( "path/to/catalog.json" , "r" ) as fp :
    catalog_dict = json . load ( fp )
    catalog_obj = parse_catalog_v1 ( catalog = catalog_dict )

แยกวิเคราะห์ manifest.json

 import json

# parse any version of manifest.json
from dbt_artifacts_parser . parser import parse_manifest

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest ( manifest = manifest_dict )

# parse manifest.json v1
from dbt_artifacts_parser . parser import parse_manifest_v1

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v1 ( manifest = manifest_dict )

# parse manifest.json v2
from dbt_artifacts_parser . parser import parse_manifest_v2

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v2 ( manifest = manifest_dict )

# parse manifest.json v3
from dbt_artifacts_parser . parser import parse_manifest_v3

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v3 ( manifest = manifest_dict )

# parse manifest.json v4
from dbt_artifacts_parser . parser import parse_manifest_v4

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v4 ( manifest = manifest_dict )

# parse manifest.json v5
from dbt_artifacts_parser . parser import parse_manifest_v5

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v5 ( manifest = manifest_dict )

# parse manifest.json v6
from dbt_artifacts_parser . parser import parse_manifest_v6

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v6 ( manifest = manifest_dict )

# parse manifest.json v7
from dbt_artifacts_parser . parser import parse_manifest_v7

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v7 ( manifest = manifest_dict )

# parse manifest.json v8
from dbt_artifacts_parser . parser import parse_manifest_v8

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v8 ( manifest = manifest_dict )

# parse manifest.json v9
from dbt_artifacts_parser . parser import parse_manifest_v9

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v9 ( manifest = manifest_dict )

# parse manifest.json v10
from dbt_artifacts_parser . parser import parse_manifest_v10

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v10 ( manifest = manifest_dict )

# parse manifest.json v11
from dbt_artifacts_parser . parser import parse_manifest_v11

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v11 ( manifest = manifest_dict )

# parse manifest.json v12
from dbt_artifacts_parser . parser import parse_manifest_v12

with open ( "path/to/manifest.json" , "r" ) as fp :
    manifest_dict = json . load ( fp )
    manifest_obj = parse_manifest_v12 ( manifest = manifest_dict )

แยกวิเคราะห์ run-results.json

 import json

# parse any version of run-results.json
from dbt_artifacts_parser . parser import parse_run_results

with open ( "path/to/run-resultsjson" , "r" ) as fp :
    run_results_dict = json . load ( fp )
    run_results_obj = parse_run_results ( run_results = run_results_dict )

# parse run-results.json v1
from dbt_artifacts_parser . parser import parse_run_results_v1

with open ( "path/to/run-results.json" , "r" ) as fp :
    run_results_dict = json . load ( fp )
    run_results_obj = parse_run_results_v1 ( run_results = run_results_dict )

# parse run-results.json v2
from dbt_artifacts_parser . parser import parse_run_results_v2

with open ( "path/to/run-results.json" , "r" ) as fp :
    run_results_dict = json . load ( fp )
    run_results_obj = parse_run_results_v2 ( run_results = run_results_dict )

# parse run-results.json v3
from dbt_artifacts_parser . parser import parse_run_results_v3

with open ( "path/to/run-results.json" , "r" ) as fp :
    run_results_dict = json . load ( fp )
    run_results_obj = parse_run_results_v3 ( run_results = run_results_dict )

# parse run-results.json v4
from dbt_artifacts_parser . parser import parse_run_results_v4

with open ( "path/to/run-results.json" , "r" ) as fp :
    run_results_dict = json . load ( fp )
    run_results_obj = parse_run_results_v4 ( run_results = run_results_dict )

# parse run-results.json v5
from dbt_artifacts_parser . parser import parse_run_results_v5

with open ( "path/to/run-results.json" , "r" ) as fp :
    run_results_dict = json . load ( fp )
    run_results_obj = parse_run_results_v5 ( run_results = run_results_dict )

# parse run-results.json v6
from dbt_artifacts_parser . parser import parse_run_results_v6

with open ( "path/to/run-results.json" , "r" ) as fp :
    run_results_dict = json . load ( fp )
    run_results_obj = parse_run_results_v6 ( run_results = run_results_dict )

แยกแหล่งที่มา json

 import json

# parse any version of sources.json
from dbt_artifacts_parser . parser import parse_sources

with open ( "path/to/sources.json" , "r" ) as fp :
    sources_dict = json . load ( fp )
    sources_obj = parse_sources ( sources = sources_dict )

# parse sources.json v1
from dbt_artifacts_parser . parser import parse_sources_v1

with open ( "path/to/sources.json" , "r" ) as fp :
    sources_dict = json . load ( fp )
    sources_obj = parse_sources_v1 ( sources = sources_dict )

# parse sources.json v2
from dbt_artifacts_parser . parser import parse_sources_v2

with open ( "path/to/sources.json" , "r" ) as fp :
    sources_dict = json . load ( fp )
    sources_obj = parse_sources_v2 ( sources = sources_dict )

# parse sources.json v3
from dbt_artifacts_parser . parser import parse_sources_v3

with open ( "path/to/sources.json" , "r" ) as fp :
    sources_dict = json . load ( fp )
    sources_obj = parse_sources_v3 ( sources = sources_dict )

ผู้มีส่วนร่วม

ขอบคุณสำหรับผลงานของคุณ!

หากคุณสนใจที่จะมีส่วนร่วมในแพ็คเกจนี้โปรดตรวจสอบการสนับสนุน

_{Yu Ishikawa}	_โมฆะ	_{Brent Brewington}	_{ยูดาห์แรนด์}	_{Mayur Singal}	_{Mohamed Nabil Mahmoud Hafez}
_{Onkar Ravgan}	_โมฆะ