How to Run Scrapy on Jupyter Notebook and Crawl a Website to CSV

แชร์
ฝัง
  • เผยแพร่เมื่อ 23 ม.ค. 2025

ความคิดเห็น • 18

  • @MZRoffical
    @MZRoffical 10 หลายเดือนก่อน

    Hello sir thank you v much fr the hard work done.

  • @combine786
    @combine786 11 หลายเดือนก่อน

    awesome content helpful i have subscribed

  • @starlight5531
    @starlight5531 3 หลายเดือนก่อน

    i did everything same as you but my csv file is empty, why ?

    • @ScrapingNinja
      @ScrapingNinja  3 หลายเดือนก่อน

      Can you see scraped data in your out logs?

  • @MuhammadAhmad-bx2rw
    @MuhammadAhmad-bx2rw ปีที่แล้ว +3

    Can you make a video how we can solve Google captach, recaptacha, cloudfare etc

    • @ScrapingNinja
      @ScrapingNinja  ปีที่แล้ว

      I would but unfortunately its is against youtube content policy..

    • @MuhammadAhmad-bx2rw
      @MuhammadAhmad-bx2rw ปีที่แล้ว +1

      @@ScrapingNinjaKindly video record kar ka link share kar day sir. It helps a lot. Thanks a lot.

    • @MuhammadAhmad-bx2rw
      @MuhammadAhmad-bx2rw ปีที่แล้ว +1

      @@ScrapingNinja Or can you please refer any blogs.or articles

  • @asadurrehman3591
    @asadurrehman3591 ปีที่แล้ว

    sir, among databsaes which one is better for web scrapping projects? mongodb or sql?

    • @ScrapingNinja
      @ScrapingNinja  ปีที่แล้ว +1

      Scrapy doesn’t provide builtin support for either so you can use any of them both are equally good.

  • @stephenellis4777
    @stephenellis4777 ปีที่แล้ว

    Good video. How would you save/export to json instead of csv?

    • @ScrapingNinja
      @ScrapingNinja  ปีที่แล้ว

      Thanks stephen, you can add .json instead of csv, scrapy supports csv, json, xml and a few other

  • @rajanair79
    @rajanair79 3 หลายเดือนก่อน

    Appreciate you video, but Unfortunately i couldnt learn anything as you were just writing the code and didnt explain what all those code mean and when to write what

    • @ScrapingNinja
      @ScrapingNinja  3 หลายเดือนก่อน

      I think it has audio as well..

  • @ljfi3324
    @ljfi3324 ปีที่แล้ว

    How scrape tik tok?