هوش مصنوعی Phi-3.5

هوش مصنوعی Phi-3.5 ماکروسافت رونمایی شد

زمان مطالعه 3 دقیقه

مایکروسافت اگرچه همکاری نزدیکی با OpenAI دارد، اما تنها به کار با این شرکت اکتفا نمی‌کند. غول دنیای فناوری به‌تازگی از سه مدل جدید Phi-3.5 رونمایی کرده که باتوجه به نتایج بنچمارک‌ها می‌توان آن‌ها را رقیبی برای مدل‌های گوگل و OpenAI دانست. در ادامه به معرفی مدل های هوش مصنوعی Phi-3.5 می پردازیم.

خرید اکانت هوش مصنوعی

مایکروسافت به‌تازگی سه مدل جدید سری Phi-3.5 را معرفی کرده است. هر سه مدل برای دانلود از پلتفرم Hugging Face تحت مجوز MIT در دسترس هستند که امکان استفاده تجاری و تغییر بدون محدودیت را فراهم می‌کند. این سه مدل به شرح زیر هستند:

  • مدل Phi-3.5-mini-instruct با 3.82 میلیارد پارامتر.
  • مدل Phi-3.5-MoE-instruct با 41.9 میلیارد پارامتر.
  • مدل Phi-3.5-vision-instruct با 41.15 میلیارد پارامتر.

مدل‌های هوش مصنوعی Phi-3.5 مایکروسافت

به شکل شگفت‌انگیزی، هر سه مدل در تعدادی از تست‌های بنچمارک شخص ثالث عملکردی تقریباً عالی دارند، حتی در برخی موارد از سایر مدل‌های هوش مصنوعی مانند جمینای 1.5 فلش گوگل، Llama 3.1 متا و حتی GPT-4o از OpenAI پیشی می‌گیرند. عرضه چنین مدل‌های قدرتمند و متن‌بازی تحسین کاربران در شبکه اجتماعی ایکس را نیز در پی داشته است.

هوش مصنوعی Phi-3.5

Phi-3.5 Mini Instruct یک مدل هوش مصنوعی سبک با 3.8 میلیارد پارامتر است که دارای پنجره زمینه با 128 هزار توکن است. این مدل برای کارهایی که نیاز به قابلیت‌های استدلال قوی دارند مانند کدنویسی، حل مسائل ریاضی و استدلال مبتنی بر منطق ایده‌آل است. مدل Phi-3.5 Mini Instruct با وجود اندازه کوچک خود، عملکردی تقریباً عالی در تعدادی از بنچمارک‌ها دارد و از دیگر مدل‌های هم‌اندازه خود مانند Llama-3.1-8B-instruct و Mistral-7B-instruct در بنچمارک RepoQA جلو می‌زند.

هوش مصنوعی Phi-3.5

مدل Phi-3.5 MoE ظاهراً اولین مدل MoE (ترکیب متخصصان) مایکروسافت است، این مدل‌ چندین نوع مدل مختلف را در خود ترکیب می‌کند که هر کدام در وظایف متفاوتی تخصص دارند. مدل جدید مایکروسافت از 42 میلیارد پارامتر فعال بهره می‌برد و پنجره زمینه آن 128 هزار توکن است. این مدل به‌طرز چشمگیری GPT-4o mini را در بنچمارک MMLU 5 در حوزه‌هایی مانند STEM، علوم انسانی، علوم اجتماعی در سطوح مختلف شکست می‌دهد.

هوش مصنوعی Phi-3.5

مدل Phi-3.5 Vision Instruct قابلیت‌های پردازش متن و تصویر را ادغام می‌کند. این مدل چندوجهی به‌ویژه برای کارهایی مانند درک کلی تصویر، تشخیص کاراکترها، درک نمودار، جدول و خلاصه‌سازی ویدئو مناسب است. مانند دو مدل قبلی، پنجره زمینه این مدل 128 هزار توکن است.

مدل Phi-3.5 Mini Instruct روی 3.4 تریلیون توکن با استفاده از 512 پردازشگر گرافیکی H100-80G طی 10 روز آموزش داده شده است، در حالی که مدل Vision Instruct روی 500 میلیارد توکن با استفاده از 256 پردازشگر گرافیکی A100-80G در مدت 6 روز آموزش دید. مدل Phi-3.5 MoE نیز که دارای معماری ترکیبی از متخصصان است، در طول 23 روز روی 4.9 تریلیون توکن با 512 پردازشگر گرافیکی H100-80G آموزش داده شد.

امتیاز دهید

برای این نوشته برچسبی وجود ندارد !

نظرات کاربران

دیدگاهی بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

تومان (IRT)
()
پرداخت می‌کنید
()
تومان (IRT)
دریافت می‌کنید
1 = IRT