NextGenLakehouse
NextGenLakehouse
  • 141
  • 160 364
Meet a Databricks MVP: Rishabh Pandey
The Databricks MVP Program is our way of thanking and recognizing the community members, data scientists, data engineers, developers and open source enthusiasts who go above and beyond to uplift the data and AI community.
มุมมอง: 327

วีดีโอ

What's new in Databricks - December 2024
มุมมอง 457วันที่ผ่านมา
Databricks December 2024 Release Highlights. NextGenLakehouse
The perks of using Unity Catalog managed tables
มุมมอง 37521 วันที่ผ่านมา
Documentation docs.databricks.com/en/tables/managed.html Linkedin: www.linkedin.com/in/cindyxjiang/
Simplified ETL with Rivery and Databricks
มุมมอง 14328 วันที่ผ่านมา
Taylor McGrath, who leads Solutions Engineering at Rivery, discusses the platform's capabilities and its integration with Databricks. Rivery is a modern integration platform operating in the ELT (Extract, Load, Transform) space, designed to simplify data pipeline building and maintenance. Key points: • Rivery offers a no-code interface for data engineers and analysts to extract and load data fr...
From Berkeley to a $B company Data+AI Startup - Lesson learn with Arsalan Tavakoli
มุมมอง 570หลายเดือนก่อน
In this interview, Databricks co-founder Arsalan Tavakoli discusses the challenges and rewards of being a leader in the rapidly changing tech industry. Tavakoli shares his insights on topics like: ●Building and scaling a company from the ground up ●Balancing work and personal life ●Making key decisions ●Hiring and developing a world-class team ●Adapting to the rise of AI Arsalan offers advice t...
Why you should consider using an Open source Semantic layer with David Mariani CTO at Atscale
มุมมอง 276หลายเดือนก่อน
In this interview, David Mariani, CTO of AtScale, discusses the importance of semantic layers, especially in the age of LLMs. Mariani argues that semantic layers are crucial for bridging the gap between the general knowledge of LLMs and the specific terminology and definitions used within companies. He emphasizes the difficulty of building semantic layers manually due to the complexity of busin...
Why you should start using Unity Catalog
มุมมอง 285หลายเดือนก่อน
This video features a discussion with Michelle Leon, Product Manager for Unity Catalog at Databricks. The conversation focuses on the open-source version of Unity Catalog, its features, and why users should consider adopting it. Michelle explains the core functionalities of a data catalog, including metadata management, governance, commit coordination, and support for diverse data and AI assets...
The Future of Data Engineering with Databricks Lakeflow ( Bilal Aslam)
มุมมอง 8712 หลายเดือนก่อน
The Future of Data Engineering with Databricks Lakeflow ( Bilal Aslam)
OSS Discussion with Denny Lee Principal Developer Advocate at Databricks
มุมมอง 2402 หลายเดือนก่อน
OSS Discussion with Denny Lee Principal Developer Advocate at Databricks
What's new in Databricks August 2024
มุมมอง 1502 หลายเดือนก่อน
What's new in Databricks August 2024
What's new in Databricks : Data Engineering and Governance
มุมมอง 2692 หลายเดือนก่อน
What's new in Databricks : Data Engineering and Governance
Databricks Serverless Discussion with Josue
มุมมอง 1542 หลายเดือนก่อน
Databricks Serverless Discussion with Josue
The future of Data Engineering with Michael Armbrust
มุมมอง 8103 หลายเดือนก่อน
The future of Data Engineering with Michael Armbrust
The future of Data Warehousing with Reynold Xin Databricks Co-founder
มุมมอง 2K3 หลายเดือนก่อน
The future of Data Warehousing with Reynold Xin Databricks Co-founder
Databricks AI Assistant
มุมมอง 2313 หลายเดือนก่อน
Databricks AI Assistant
Getting started with Databricks and Salesforce
มุมมอง 2324 หลายเดือนก่อน
Getting started with Databricks and Salesforce
Raito the Self Service Access Management Tool
มุมมอง 724 หลายเดือนก่อน
Raito the Self Service Access Management Tool
Choose Openness not storage wars with Kyle Weller Head of Product at Onehouse
มุมมอง 2014 หลายเดือนก่อน
Choose Openness not storage wars with Kyle Weller Head of Product at Onehouse
The Digital Natives podcast with Lexy Kassan from Databricks
มุมมอง 974 หลายเดือนก่อน
The Digital Natives podcast with Lexy Kassan from Databricks
Getting started with Variant Data Type in Delta Lake and Apache Spark
มุมมอง 4804 หลายเดือนก่อน
Getting started with Variant Data Type in Delta Lake and Apache Spark
Data Engineering Pro Tips from Fabrice Deseyn
มุมมอง 2814 หลายเดือนก่อน
Data Engineering Pro Tips from Fabrice Deseyn
Open Sourcing Unity Catalog with Michelle Leon Product Manager at Databricks
มุมมอง 4004 หลายเดือนก่อน
Open Sourcing Unity Catalog with Michelle Leon Product Manager at Databricks
What's new in Databricks - July 2024
มุมมอง 2835 หลายเดือนก่อน
What's new in Databricks - July 2024
Streamline the migration process to Databricks with Alchemist
มุมมอง 1995 หลายเดือนก่อน
Streamline the migration process to Databricks with Alchemist
Databricks AIBI Genie: The best Text2SQL AI System with Chao Cai, Sr Director Engineering
มุมมอง 8005 หลายเดือนก่อน
Databricks AIBI Genie: The best Text2SQL AI System with Chao Cai, Sr Director Engineering
Getting Started with Databricks Connect and Serverless Compute
มุมมอง 1.4K5 หลายเดือนก่อน
Getting Started with Databricks Connect and Serverless Compute
Getting Started with Amperity: Data quality to fuel AI and engagement
มุมมอง 3365 หลายเดือนก่อน
Getting Started with Amperity: Data quality to fuel AI and engagement
Power BI and Databricks SQL best practices
มุมมอง 7465 หลายเดือนก่อน
Power BI and Databricks SQL best practices
The future of Delta Lake and Apache Iceberg with Tathagata Das
มุมมอง 1.2K5 หลายเดือนก่อน
The future of Delta Lake and Apache Iceberg with Tathagata Das
Data Warehousing Migration Talk With Laurent Leturgez
มุมมอง 2565 หลายเดือนก่อน
Data Warehousing Migration Talk With Laurent Leturgez

ความคิดเห็น

  • @this.vivekrawat
    @this.vivekrawat 4 วันที่ผ่านมา

    Great podcast, personally enjoyed it.

  • @techwithrishabh
    @techwithrishabh 5 วันที่ผ่านมา

    Thanks for having me, it was a wonderful podcast experience.

  • @RobertAltmiller
    @RobertAltmiller หลายเดือนก่อน

    Excellent insight!

  • @CedrickLunven-z8o
    @CedrickLunven-z8o หลายเดือนก่อน

    Great insights.. as a co-founder myself in a tiny AI startup super useful.

  • @shikokas
    @shikokas หลายเดือนก่อน

    great talk! thank you for sharing

  • @damolaakinleye101
    @damolaakinleye101 หลายเดือนก่อน

    What is sml? How is this generic or just databricks implementation

  • @JBS439
    @JBS439 หลายเดือนก่อน

    Thanks so much for this. Please how can I learn more

  • @samsoneromonsei9368
    @samsoneromonsei9368 หลายเดือนก่อน

    If i have an existing databricks account and workspace that where manually provisioned how can I extract all the environment setup into Terraform to know the state of our current deployment

  • @samsoneromonsei9368
    @samsoneromonsei9368 หลายเดือนก่อน

    The Video was too abstract and not for beginners, would great if we can put begineer videos to not especially around the authentication with SPN from local and CICD development with GitActions.

  • @RTMaster1
    @RTMaster1 หลายเดือนก่อน

    If you ever tried that you would know that this is bullshit

  • @grantdoyle1259
    @grantdoyle1259 หลายเดือนก่อน

    Why change tracking and not cdc?

  • @ITPOWERHOUSEBD
    @ITPOWERHOUSEBD 2 หลายเดือนก่อน

    Exciting update! Looking forward to this new format and the deep dives into Databricks and all things data. The bi-weekly topics sound like a fantastic way to stay on top of trends-can’t wait!

  • @ashokzubrewar8838
    @ashokzubrewar8838 2 หลายเดือนก่อน

    I love databricks but some of the features are available for all users. Example: workflows, any user with workspace access is able to create. With this it is hard to keep environment clean. Any idea when this feature will be available?

  • @NoahPitts713
    @NoahPitts713 2 หลายเดือนก่อน

    Merci Beaucoup

  • @mouradmrini1476
    @mouradmrini1476 2 หลายเดือนก่อน

    Bon courage ❤❤❤❤❤

  • @mariyaelabdli5367
    @mariyaelabdli5367 2 หลายเดือนก่อน

    ❤❤❤❤❤❤❤❤❤❤

  • @mariyaelabdli5367
    @mariyaelabdli5367 2 หลายเดือนก่อน

    ❤❤❤❤❤❤❤❤❤

  • @RossSullivan-e7v
    @RossSullivan-e7v 2 หลายเดือนก่อน

    Shields Throughway

  • @AugustineChary-s1b
    @AugustineChary-s1b 2 หลายเดือนก่อน

    White Manors

  • @AdinaKennedy-r4v
    @AdinaKennedy-r4v 3 หลายเดือนก่อน

    Deckow Summit

  • @EmersonXenia-h8b
    @EmersonXenia-h8b 3 หลายเดือนก่อน

    Adrianna Villages

  • @SoumilShah
    @SoumilShah 3 หลายเดือนก่อน

    How to use in spark SQL locally can you help with packages to add ?

  • @husanturdiev
    @husanturdiev 3 หลายเดือนก่อน

    I love this intro! :D

  • @mariyaelabdli5367
    @mariyaelabdli5367 3 หลายเดือนก่อน

    ❤❤❤❤❤❤❤

  • @mariyaelabdli5367
    @mariyaelabdli5367 3 หลายเดือนก่อน

    ❤❤❤❤❤❤❤❤❤❤❤

  • @mariyaelabdli5367
    @mariyaelabdli5367 3 หลายเดือนก่อน

    ❤❤❤❤❤❤❤❤❤

  • @mariyaelabdli5367
    @mariyaelabdli5367 3 หลายเดือนก่อน

    ❤❤❤❤❤❤❤❤❤❤❤

  • @indianprogrammer1110
    @indianprogrammer1110 3 หลายเดือนก่อน

    Engaging and intriguing session. Thank you for having Michael over. @Micheal You are a rockstarrrr man... :)

  • @killianballand8838
    @killianballand8838 3 หลายเดือนก่อน

    Awesome video and awesome guest! Michael is truly a delight to hear as a data engineer and is perfectly explaining the philosophy behind what Databricks is trying to build ♥ I'm so excited to one day see the open sourcing of DLT 🤩 Keep up the good work!

  • @VernitaMcclatcher
    @VernitaMcclatcher 3 หลายเดือนก่อน

    99927 Braun Prairie

  • @MorrisEve-j3o
    @MorrisEve-j3o 3 หลายเดือนก่อน

    Delia Trail

  • @AugustineMarrable-b6b
    @AugustineMarrable-b6b 3 หลายเดือนก่อน

    Emilia Views

  • @zwunet
    @zwunet 3 หลายเดือนก่อน

    Reynold mentioned that he was rapidly churning out code for Apache Spark around 2016 and 2017. During that time, my team adopted it for our applications, and I ended up creating many Jira tickets and Rennold often directly got involved to resolve the tickets. It was challenging to work through the bugs and issues in the framework back then, but since version 2.4, we haven’t encountered any major problems-we’re really happy with the improvements! The most recent issue I faced was with Spark v3.6, where converting a DataFrame to a Pandas DataFrame threw an exception. However, after downgrading the Pandas version, the issue was resolved. I didn’t create a ticket for this one. It’s great to hear from the interview that Reynold has many exciting ideas in the works. He’s no longer just an individual pilot-now he’s the captain of an entire fleet. I’m confident he’ll lead us from "big" to "huge."

  • @JohnLow-x6l
    @JohnLow-x6l 3 หลายเดือนก่อน

    Rogahn Extension

  • @laobaba
    @laobaba 3 หลายเดือนก่อน

    How did you do the first step of converting the PDF into chunks and into a database? I feel like we skipped a step here

  • @HoltChanning-w8d
    @HoltChanning-w8d 3 หลายเดือนก่อน

    Becker Mountain

  • @XiomaraFronczak-s3z
    @XiomaraFronczak-s3z 3 หลายเดือนก่อน

    Dereck Flats

  • @eefweeqwewefrth-b3b
    @eefweeqwewefrth-b3b 3 หลายเดือนก่อน

    Brad Row

  • @JoanContofalsky-q4j
    @JoanContofalsky-q4j 4 หลายเดือนก่อน

    Jaskolski Junctions

  • @mariaelabdli9027
    @mariaelabdli9027 4 หลายเดือนก่อน

    ❤❤❤❤❤❤❤

  • @mariaelabdli9027
    @mariaelabdli9027 4 หลายเดือนก่อน

    ❤❤❤❤❤❤❤❤

  • @mariaelabdli9027
    @mariaelabdli9027 4 หลายเดือนก่อน

    ❤❤❤❤❤

  • @utsavchanda4190
    @utsavchanda4190 4 หลายเดือนก่อน

    Thank you for another great conversation

  • @mariaelabdli9027
    @mariaelabdli9027 4 หลายเดือนก่อน

    ❤❤❤❤

  • @GuillermoG.SchiavaDAlbano
    @GuillermoG.SchiavaDAlbano 4 หลายเดือนก่อน

    Great video: * Intro who is Fabrice, a Data Practitioner and a Databricks Champion th-cam.com/video/fwnhGDZABAk/w-d-xo.html * How to become a Databricks Champion ? th-cam.com/video/fwnhGDZABAk/w-d-xo.html&t=97s * How hard is to convince business (C level) of the need for UC th-cam.com/video/fwnhGDZABAk/w-d-xo.html&t=915s * When migration UC, how hard is to get access to the team that owns the Account Console th-cam.com/video/fwnhGDZABAk/w-d-xo.html&t=1150s

  • @NoahPitts713
    @NoahPitts713 4 หลายเดือนก่อน

    Looking forward to this!

  • @noorbashashaik2124
    @noorbashashaik2124 4 หลายเดือนก่อน

    Can we use UC OSS to share data with consumers within the organization, especially with those who use Python based scripts to pull data from the Lakehouse? Also, would be good to see guidance around when to use UC OSS Vs Delta Sharing.

    • @nextgenlakehouse
      @nextgenlakehouse 4 หลายเดือนก่อน

      Unity Catalog open APIs is a two way road enabling read and write access to data through api

    • @noorbashashaik2124
      @noorbashashaik2124 4 หลายเดือนก่อน

      @@nextgenlakehouse ok, understood. So, I assume we can just grant READ access also. The consumer needs to clone the git repo, install UC, and access data, is that the high level procedure?

  • @mariaelabdli9027
    @mariaelabdli9027 4 หลายเดือนก่อน

    ❤❤❤❤

  • @Lena-v7g
    @Lena-v7g 5 หลายเดือนก่อน

    Love it 😀

  • @mariaelabdli9027
    @mariaelabdli9027 5 หลายเดือนก่อน

    ❤❤❤❤❤❤❤❤❤