Recent Posts

Marathon Review

🔥 Trending now in : Marathon Review From ARC Raiders to Escape From Duckov, extraction shooters seem to be enjoying something of a renaissance right now, to the delight of FPS fans like myself. But of all the newcomers to that space, none have captured my attention more than Marathon since I first played its early alpha over a year …

Read More »

AI in Multiple GPUs: ZeRO & FSDP

of a series about distributed AI across multiple GPUs: Introduction In the previous post, we saw how Distributed Data Parallelism (DDP) speeds up training by splitting batches across GPUs. DDP solves the throughput problem, but it introduces a new challenge: memory redundancy. In vanilla DDP, every GPU holds a complete copy of the model parameters, gradients, and optimizer states. For large …

Read More »

مساعد طيار، أو برنامج ChatGPT، أو وكيل ذكاء اصطناعي؟ أي شخص لا يفهم الفرق الشاسع يخاطر بقدرته التنافسية

المساعد الذكي: دمجه في العمل اليومي يعتمد المساعد الذكي المدعوم بالذكاء الاصطناعي على تقنية الدردشة المدعومة بالذكاء الاصطناعي، ولكنه يتجاوزها بخطوة جوهرية: فهو مُدمج في بيئات البرمجيات الحالية، وبالتالي يتمتع بإمكانية الوصول إلى البيانات والوظائف ذات الصلة بالسياق. وأبرز مثال على ذلك هو Microsoft Copilot، المُدمج مباشرةً في بيئة Microsoft 365، والذي يتيح الوصول إلى Outlook وWord وExcel وPowerPoint وTeams. …

Read More »