Distributed Inference with Multi-Machine & Multi-GPU Setup | Deploying Large Models via vLLM & Ray !

แชร์
ฝัง
  • เผยแพร่เมื่อ 25 พ.ย. 2024

ความคิดเห็น • 2

  • @saravanakumarp
    @saravanakumarp หลายเดือนก่อน +1

    thanks for sharing! Its a good info

  • @МихаилКомаров-о6о
    @МихаилКомаров-о6о 3 วันที่ผ่านมา

    Wonderful video. Can you share the code please? And in other videos on the same theme of multinode