Intelligence SynthesisJAEN

تقارير الذكاء الاصطناعي · Amazon · 2026-10-21 · مدونة / تعليق

تدريب Qwen3 على AWS Trainium باستخدام torchtitan

العنوان الأصلي: Train Qwen3 on AWS Trainium with torchtitan

تُدرِّب هذه التدوينة نموذج Qwen3 بثلاث طرق على مثيل trn2.48xlarge واحد باستخدام torchtitan: الواجهة الخلفية للنمذجة في Hugging Face Transformers v5، ونسخة Qwen3 الأصلية المدمجة في torchtitan، ونوى NKI الخاصة بمزيج الخبراء. ويعمل مشغّل torchrun نفسه وهيكل الإعدادات نفسه دون تغيير عبر المسارات الثلاثة جميعها، بما في ذلك تحميل وحفظ ملفات safetensors المنشورة على Hugging Face. ويُسجّل TorchNeuron شرائح Trainium بوصفها أجهزة أصلية في PyTorch، مما يتيح لـ torchtitan استخدامها من خلال واجهات PyTorch القياسية.

اقرأ المصدر الأصلي ↗

جميع تقارير الذكاء الاصطناعي →