What is ETL with a clear example - Data Engineering Concepts

แชร์
ฝัง
  • เผยแพร่เมื่อ 29 พ.ย. 2024

ความคิดเห็น • 106

  • @aahsankhan4502
    @aahsankhan4502 ปีที่แล้ว +47

    Sir, this is a Superb Explanation.

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      Glad you liked it

  • @freedomofspeech122
    @freedomofspeech122 ปีที่แล้ว +16

    I liked the clever pun "Enjoyed? Then Like" (ETL) 😁

  • @ArenitaHernandez
    @ArenitaHernandez 10 หลายเดือนก่อน +3

    What an eloquent manner to describe these concepts. I greatly appreciate it. 🙏🏽

  • @yqhanliving
    @yqhanliving ปีที่แล้ว +1

    I'm a beginner to data analysis and was hearing about ETL for the first time in one of my SQL projects. This video has explained ETL very clearly to me. Thanks Chandoo!

  • @raghukoduri2018
    @raghukoduri2018 ปีที่แล้ว +9

    Neither Ramarao nor RamCharan, you are my Superhero!! God bless you with long life Anna. Thank you so much for the great content

    • @carcrazynishant
      @carcrazynishant ปีที่แล้ว

      Wow respect man… most people pay obeisances to actors from who we get entertained and not educated

    • @chaitanyakumar3023
      @chaitanyakumar3023 ปีที่แล้ว

      Wonder to see actor comparison in comments for ETL !

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      That is so sweet. Thanks Raghu 😍

  • @juliamavis2830
    @juliamavis2830 7 หลายเดือนก่อน +1

    I’m looking into pivoting my career into data engineering and this video really was informative. Thank you

  • @AllisonSadin-cq2wt
    @AllisonSadin-cq2wt 6 หลายเดือนก่อน

    This is the video I have been searching for! I was so confused about how ETL could be defined... if ETL only happened using ETL tools, or if you could build your own ETL pipeline without the common tools! Thank you!

  • @AdalgrimTook
    @AdalgrimTook 6 หลายเดือนก่อน +11

    Came here thinking I know nothing about this but turns out it's my daily job lol

  • @hazmannaim705
    @hazmannaim705 7 หลายเดือนก่อน +1

    I like how you show us the real-world example. Make the learning more understandable!

  • @FawazPashaShroff
    @FawazPashaShroff 2 หลายเดือนก่อน +1

    Bro you are dam good at explanation, I love learning from the ETL course

  • @joshuabretana
    @joshuabretana ปีที่แล้ว +3

    I like how you explain topics, they never get anymore complicated

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      Thanks Joshua...

  • @nukestrom5719
    @nukestrom5719 7 หลายเดือนก่อน

    What a great mentor.

  • @tamirbahalker16
    @tamirbahalker16 10 หลายเดือนก่อน

    Thank you for a great explanation, we need more of you in this world😄

  • @eltonruco3598
    @eltonruco3598 25 วันที่ผ่านมา

    thank you man, very clear and helpful

  • @aryanpatil49
    @aryanpatil49 3 หลายเดือนก่อน

    Along with the explanation, your presentation and delivery style is beautiful

  • @markpatterson766
    @markpatterson766 ปีที่แล้ว

    I enojyed that. Countless examples without actual specific examples like this.

  • @arjundev4908
    @arjundev4908 ปีที่แล้ว +1

    I watched in 13 minutes. But the pain behind to shoot this video with all those props. Amazing efforts chandoo sir😮😊

    • @chandoo_
      @chandoo_  ปีที่แล้ว +1

      Thanks Arjun :) It was a fun video to make.

  • @surajmane5481
    @surajmane5481 6 หลายเดือนก่อน

    It's Wow! The way you explain...….

  • @stevenvanveldhoven4368
    @stevenvanveldhoven4368 5 หลายเดือนก่อน

    Thanks Chandoo. I always enjoy learning from you.

  • @djenobthemixbane1146
    @djenobthemixbane1146 7 หลายเดือนก่อน

    Thank you so much for this. It helped clarify a lot about ETL and its tools

  • @NaisDeis
    @NaisDeis ปีที่แล้ว +1

    Man, this clarifies everything, thank you so much!

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      Glad it was helpful!

  • @itz_sameer795
    @itz_sameer795 12 วันที่ผ่านมา

    Awesome explanation brother... keep it up :)

  • @chijiokeijezie969
    @chijiokeijezie969 ปีที่แล้ว +2

    Your videos and teachings are top notch!!! Simply good at what you do

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      Glad you like them!

  • @tariqhussain1497
    @tariqhussain1497 8 หลายเดือนก่อน

    Good morning, and thats the nice to explain with a small data set

  • @learn_ai_with_us
    @learn_ai_with_us ปีที่แล้ว

    last ETL concept was great ...

  • @kehindefayomi7417
    @kehindefayomi7417 ปีที่แล้ว

    Am always happy seeing you solving problems...kudos my mentor

  • @victorbegnini5754
    @victorbegnini5754 10 หลายเดือนก่อน

    Amazing explanation!!
    Thanks for that 🎉

  • @PillsLifestyleReviews
    @PillsLifestyleReviews 7 หลายเดือนก่อน

    Thank You So Much. You put a lot of effort into this vid!

  • @VivekKBangaru
    @VivekKBangaru 8 หลายเดือนก่อน

    Really enjoyed it. Thanks bro

  • @andrewjason3756
    @andrewjason3756 ปีที่แล้ว +2

    You are doing such good work. Keep it up.😊

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      You are welcome Andrew. 😀

  • @ihemanthsagar
    @ihemanthsagar 2 หลายเดือนก่อน

    You won a subscriber 👍

  • @thenorthremembers5978
    @thenorthremembers5978 2 หลายเดือนก่อน

    thank you! this was super helpful

  • @pcandy468
    @pcandy468 5 หลายเดือนก่อน +1

    The whole video was very helpful! I did chuckle at the ETL/like the video joke 🤭

    • @chandoo_
      @chandoo_  5 หลายเดือนก่อน

      Glad it helped!

  • @omgitsbees
    @omgitsbees 2 หลายเดือนก่อน

    Thank you for this video! This helps me a lot, even though I already have experience with ETL. :) I like using Python to do this and actually is how I got started because I was learning on my own and went down the wrong path. :P

  • @shivaratribikshapathilinus5985
    @shivaratribikshapathilinus5985 5 หลายเดือนก่อน

    Am learning the ETL

  • @kirandeepmarala5541
    @kirandeepmarala5541 ปีที่แล้ว +1

    Awesome Video Chandoo Annaya 💌👏

  • @talesoftravelsbysj
    @talesoftravelsbysj 4 หลายเดือนก่อน

    Clever explanation

  • @balutaalex6694
    @balutaalex6694 ปีที่แล้ว

    ASMR, amazing explanation!

  • @PavanMS87
    @PavanMS87 ปีที่แล้ว

    Thanks a ton . Invaluable

  • @loybiz
    @loybiz 9 หลายเดือนก่อน

    Great job. Thanks a ton

  • @alfredtomiamubiaya3330
    @alfredtomiamubiaya3330 ปีที่แล้ว

    Many thanks Chandoo.You are awesome.

  • @aiasaiascon3894
    @aiasaiascon3894 ปีที่แล้ว

    Super cool explanations - I like the paper concept

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      Glad you liked it!

  • @edwindsouza7157
    @edwindsouza7157 9 หลายเดือนก่อน

    Very good explanation power

  • @jagatkrishna1543
    @jagatkrishna1543 ปีที่แล้ว

    Thanks 🙏 SIR, God Bless You

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      Most welcome

  • @chicaocasanova
    @chicaocasanova 5 หลายเดือนก่อน

    Thank you very much ❤

  • @chrism9037
    @chrism9037 ปีที่แล้ว

    Nice work Chandoo, thank you!

  • @Sandeepindiamyself
    @Sandeepindiamyself ปีที่แล้ว

    Nicely explained sir😊...!!! Please make a complete video of Microsoft 365.

  • @nviknesh8112
    @nviknesh8112 11 หลายเดือนก่อน

    Hi Chandoo, Happy new Year 2024. I have experience in Oracle PLSQL and MSSQL database's and i wish to switch my career to datawarehouse projects. Kindly guide me the path to proceed like what course should i start..

  • @janauppara
    @janauppara ปีที่แล้ว

    Any ETL tool recommendation to start with?

  • @idreeskhan5129
    @idreeskhan5129 ปีที่แล้ว

    wow this is so amazing .

  • @hukkuhukku6208
    @hukkuhukku6208 9 หลายเดือนก่อน

    👏🏻awesome

  • @Nash0303
    @Nash0303 10 หลายเดือนก่อน

    Fantastic!!

  • @aparnapandravada5073
    @aparnapandravada5073 ปีที่แล้ว

    Awesome, very useful

  • @nikki_siddi
    @nikki_siddi ปีที่แล้ว

    Great video!!

  • @NavneetKaur-kd6bd
    @NavneetKaur-kd6bd ปีที่แล้ว +1

    Sir , i wanted to ask you that if i wanted to be a Business Analyst and Data analyst should i pursue MBA after having the skill set of Data analyst.
    And if i pursue MBA , should i do specialisation in Business Analyst or Normal MBA would do?
    Thank you ❤️

    • @chandoo_
      @chandoo_  ปีที่แล้ว +1

      MBA is not requirement to be either Business or Data Analyst. If you have a strong background in the industry, you can get in to these positions. MBA often helps in speeding up the process (for example it might take 4-5 years of experience to get the role, but with MBA you might get the same in 1-2 years).

  • @CaribouDataScience
    @CaribouDataScience ปีที่แล้ว

    Thanks.

  • @KiranYadavOG
    @KiranYadavOG ปีที่แล้ว

    thank you!

  • @nandiniagarwal9201
    @nandiniagarwal9201 ปีที่แล้ว

    Pls make a video on how to upload a dashoboard on linkedin

  • @Prabhakaran-hp1to
    @Prabhakaran-hp1to ปีที่แล้ว

    Thank you so much!

  • @ajayyaleti6197
    @ajayyaleti6197 ปีที่แล้ว

    Thank you ❤

  • @ppy0019
    @ppy0019 ปีที่แล้ว

    Hello sir , please make a full course in SQL ...please sir

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      I have a detailed SQL video here - th-cam.com/video/l8DCPaHc5TQ/w-d-xo.html

  • @easterntoronto
    @easterntoronto 6 หลายเดือนก่อน

    Great

  • @Sardar_Uk
    @Sardar_Uk 4 หลายเดือนก่อน

    Which tool you used? Please reply

  • @talebbagazi1435
    @talebbagazi1435 3 หลายเดือนก่อน

    For ETL include as if we have one shared drive for the company and we take couple of data and combine and clean the data to get the data you need to create a report? Or I should have other sources like sql, azure or scrap the data?

    • @chandoo_
      @chandoo_  3 หลายเดือนก่อน

      Not sure I understand your question. Try again please?

    • @talebbagazi1435
      @talebbagazi1435 3 หลายเดือนก่อน

      @@chandoo_ my question is, can i say I do etl if I combine multiple excels using a primary’s keys? Or it something advance like scrape a data then joining data using sql?

    • @chandoo_
      @chandoo_  3 หลายเดือนก่อน

      Just cleaning data and combining tables is not ETL. You will need to be actually doing the "L" to a database / warehouse system. Don't be fast and loose with the terminology (especially in interviews).

    • @talebbagazi1435
      @talebbagazi1435 3 หลายเดือนก่อน

      @@chandoo_ please can further explain how to do the “L” to the database?

    • @chandoo_
      @chandoo_  3 หลายเดือนก่อน

      L = Load. This is where the transformed data is loaded to target system using either SQL or some other ingestion methods.

  • @rajatthakur6444
    @rajatthakur6444 ปีที่แล้ว

    bring end to end ETL project Sir

  • @trueman5948
    @trueman5948 ปีที่แล้ว

    Sir do we need sqlserves ,ssis,azure, To learn powerbi and to get job on it.

  • @skrejaulhaque
    @skrejaulhaque ปีที่แล้ว +1

    Thank you, first comment

  • @rockky-zz8ii
    @rockky-zz8ii ปีที่แล้ว

    Hi Chandoo, can you help me in one issue I'm facing like. I have one Item number xyx00001 but for that 3departments are working but when I have created a Measure formula of variance e.g. (calculate Sum(total hour) - Sum(actual hours))in measure result I'm getting 3 different value instead on same on in each row any logic can you provide. and yes there is no relationship issue for that can you help

  • @daminitripathi913
    @daminitripathi913 ปีที่แล้ว

    sir can you share data so that we can practice the same query

    • @chandoo_
      @chandoo_  ปีที่แล้ว

      You can use the dataset and SQL shared in this video - th-cam.com/video/l8DCPaHc5TQ/w-d-xo.html

  • @MaxSmith-d6i
    @MaxSmith-d6i หลายเดือนก่อน +1

    This is awesome: loved the jokes

  • @JagdishDive123
    @JagdishDive123 ปีที่แล้ว

    Is ETL dev job will replace by AI.? How can freshers tackle this ? 😢

  • @BhuvaaneshRavi
    @BhuvaaneshRavi 6 หลายเดือนก่อน

    SHouldnt it be if(sum(s.amount)>1000,1,0)

  • @transworld8005
    @transworld8005 ปีที่แล้ว

    😃

  • @mukeshvarma8662
    @mukeshvarma8662 ปีที่แล้ว

    Chandoo, i have a problem. I need ur help. I have a excel files in share point . Which has query connection with other excel files. I need to refresh all in a excel file. Without opening the file manually. Because that file is connected to power bi

    • @mikatu
      @mikatu ปีที่แล้ว +1

      forget it!
      you need to delete the main file and run a progress report. the report will delete the setup and then you insert the fileload which will allow for a refresh on demand.

  • @yonisupersaiyanyoni3693
    @yonisupersaiyanyoni3693 หลายเดือนก่อน

    Where the stages explenation

  • @whothefcares2687
    @whothefcares2687 5 หลายเดือนก่อน

    ETL is just data entry then? WTF😂

  • @prrrrince
    @prrrrince ปีที่แล้ว

    First

  • @akashgautam1909
    @akashgautam1909 ปีที่แล้ว

    Hello Sir,
    Could you please help me know what skills are required to become a data analyst?
    I've watched tons of videos including yours on this topic and got confused.
    To give a brief idea,
    I have an intermediate level of knowledge of Excel, SQL, Python (Including Numpy, Pandas, Matplotlib, and Seaborn), Power BI ( PQ, Data Modeling, DAX, Dashboarding), and Statistics.
    When I go to any job portals, it says you need to know machine learning, and deep learning too. 🥲
    Can I get a job with these skills?

    • @bharaths5906
      @bharaths5906 5 หลายเดือนก่อน

      Did you got the job? I am in ur stage now and looking for a job