Traduction en cours…
trtllm-moe-develop
⚠ Archivé — pas de mise à jour depuis 5 mois
Par nvidia · skills
Examiner, concevoir et refactoriser le code PyTorch MoE de TensorRT-LLM pour l'adéquation architecturale, la qualité du code, la maintenabilité et la testabilité. À utiliser systématiquement pour toute modification, revue, refactorisation ou planification de conception touchant les modules MoE, notamment tensorrt_llm/_torch/modules/fused_moe, ConfigurableMoE, les backends MoE, MoEScheduler/moe_scheduler.py, l'exécution forward/le chunking, les stratégies de communication, EPLB, la quantification/gestion des poids, le routage, les factories, la documentation MoE ou les tests MoE. À utiliser également lorsque l'utilisateur demande si une conception MoE respecte l'architecture actuelle ou si une refactorisation MoE est raisonnable.
npx skills add https://github.com/nvidia/skills --skill trtllm-moe-develop
Skills similaires
Automatiser l'intégration de modèles HuggingFace dans AutoDeploy avec tests et rapport.
Ajouter, étendre ou auditer un pass de fusion dans AutoDeploy de TensorRT-LLM.
Déboguer les écarts de précision entre AutoDeploy et le backend PyTorch de TRT-LLM.
Construire des applications LLM avec Claude via le SDK officiel adapté au langage.
Composer et déployer des capacités de vision IA sur mesure via NVIDIA VSS Blueprint.