How to Build Python Data Engineering Pipelines with Snowpark

แชร์
ฝัง
  • เผยแพร่เมื่อ 16 พ.ย. 2024

ความคิดเห็น • 17

  • @jaysonp9426
    @jaysonp9426 9 หลายเดือนก่อน +1

    This was so good, thank you!

  • @avitabayansarma1011
    @avitabayansarma1011 ปีที่แล้ว +2

    This was very informative!

  • @kishorekumarkuruguntla8167
    @kishorekumarkuruguntla8167 ปีที่แล้ว +1

    Great Content

  • @luvlifk
    @luvlifk 9 หลายเดือนก่อน

    Amazing!!

  • @joerozario4406
    @joerozario4406 ปีที่แล้ว

    If the raw files in csv format, is there anyway to infer the schema without explicitly defining the schema StructType.

  • @sathwikemmadi4428
    @sathwikemmadi4428 6 หลายเดือนก่อน

    I think this video is helpful but appreciate if you can send other videos for detailed explanation or online documentation.I am asking about the architecture it starts from 07:19

  • @treyhannam3806
    @treyhannam3806 11 หลายเดือนก่อน

    Is there documentation on the toml file?

    • @snowflakedevelopers
      @snowflakedevelopers  11 หลายเดือนก่อน

      Hi @treyhannam3806, check this out: docs.snowflake.com/en/developer-guide/python-connector/python-connector-connect#connecting-using-the-connections-toml-file

  • @bharathraj4545
    @bharathraj4545 7 หลายเดือนก่อน

    Do we need an external cloud storage account to implement this project

    • @snowflakedevelopers
      @snowflakedevelopers  7 หลายเดือนก่อน

      No not at all! Try out the lab today and let us know what you think!

  • @rogierhelmus3481
    @rogierhelmus3481 ปีที่แล้ว +1

    I would appreciate a video on how to set up the environment , since I get stuck on trying to run the python script for loading the raw data. Edit: I found this video very usefull: th-cam.com/video/68I-oxeJ4HE/w-d-xo.html&ab_channel=NeuralNine

    • @snowflakedevelopers
      @snowflakedevelopers  ปีที่แล้ว

      While not quite a video, you may find Steps 1, 2, and 3 of the associated Quickstart helpful: quickstarts.snowflake.com/guide/data_engineering_pipelines_with_snowpark_python/#0

    • @snowflakedevelopers
      @snowflakedevelopers  ปีที่แล้ว

      Just a follow up to this. The associated GitHub repo for this demo now uses GitHub Codespaces to automatically provision and set up the environment for you. Check out the updated instructions in Step 2 here: quickstarts.snowflake.com/guide/data_engineering_pipelines_with_snowpark_python/#1