AI

نقل نماذج Ollama إلى مواقع مختلفة

نقل نماذج Ollama إلى مواقع مختلفة

تستغرق ملفات نموذج Ollama LLM مساحة كبيرة جدًا.

بعد تثبيت ollama من الأفضل إعادة تكوين ollama لتخزينها في مكان جديد فورًا. إذن بعد أن نسحب نموذجًا جديدًا، لن يتم تنزيله إلى الموقع القديم.

اختبار سرعة النماذج الكبيرة للغات

اختبار سرعة النماذج الكبيرة للغات

لنختبر سرعة النماذج الكبيرة للغة على وحدة معالجة الرسومات (GPU) مقابل وحدة المعالجة المركزية (CPU)

مقارنة سرعة التنبؤ لعدة إصدارات من نماذج LLMs: llama3 (Meta/Facebook)، phi3 (Microsoft)، gemma (Google)، mistral (مصدر مفتوح) على وحدة المعالجة المركزية (CPU) ووحدة معالجة الرسومات (GPU).