Spark Interview Question | Map vs MapPartition vs MapPartitionWithIndex

แชร์
ฝัง
  • เผยแพร่เมื่อ 12 ม.ค. 2025

ความคิดเห็น •

  • @mohammadhaque1873
    @mohammadhaque1873 3 ปีที่แล้ว +1

    Awesome. Thanks.

  • @SpiritOfIndiaaa
    @SpiritOfIndiaaa 4 ปีที่แล้ว

    really nice

  • @ravikatiyar6530
    @ravikatiyar6530 4 ปีที่แล้ว

    performance analysis to see if my partitions are skewed or not... couldn't this be directly analysed from spark UI... ? why would I do mapPartitions ?

  • @vsandeep06
    @vsandeep06 4 ปีที่แล้ว

    Thanks. Easy to understand.....

    • @TechWithViresh
      @TechWithViresh  4 ปีที่แล้ว

      Thanks:), do not forget to subscribe

  • @ecpavanec
    @ecpavanec 4 ปีที่แล้ว

    Could you please explain use of import sys in pyspark

  • @IndianCoupleinUKBLR
    @IndianCoupleinUKBLR 4 ปีที่แล้ว

    Awesome explanation :)

    • @TechWithViresh
      @TechWithViresh  4 ปีที่แล้ว

      Thanks, do not forget to subscribe:)

  • @chintudg5367
    @chintudg5367 4 ปีที่แล้ว

    Very good

  • @praveenreddy3104
    @praveenreddy3104 4 ปีที่แล้ว

    Was waiting for this video from u 😂

  • @RaviTeja-ss8vd
    @RaviTeja-ss8vd 4 ปีที่แล้ว

    why using rdd before mapPartition and mapPartitionWtihIndex