اولین مدل هوش مصنوعی متن باز توسط شرکت الجی معرفی شد
تحقیقات هوش مصنوعی الجی از معرفی اولین مدل هوش مصنوعی متنباز کره جنوبی به نام EXAONE 3.0 خبر داد. این مدل، ورود کره جنوبی به میدان جهانی هوش مصنوعی را که توسط غولهای تکنولوژی آمریکایی و شرکتهای نوظهور در چین و خاورمیانه تسلط یافته است، نشان میدهد. نکته قابل توجه این است که در حال حاضر این مدل تنها از دو زبان، انگلیسی و کرهای، پشتیبانی میکند.
مدل EXAONE 3.0 یک مدل متنباز است که به گزارشها، بر اساس معماری Transformer تنها Decoder ساخته شده است. این مدل دارای ۷.۸ میلیارد پارامتر و ۸ تریلیون توکن دادههای آموزشی است.
در بیانیه مطبوعاتی الجی آمده است:
«در میان مدلهای زبانی EXAONE 3.0 که برای اهداف مختلف ساخته شدهاند، مدل تنظیم دستور ۷.۸ میلیاردی به صورت پیشدرآمد متنباز شده است تا برای تحقیقات مورد استفاده قرار گیرد.»
این شرکت امیدوار است که انتشار این مدل به محققان هوش مصنوعی در کشور و در خارج کمک کند تا تحقیقات مفیدتری انجام دهند و به پیشرفت اکوسیستم هوش مصنوعی کمک کند.
بر اساس آزمایشات شرکت، توانایی مدل در زبان انگلیسی به سطح «جهانی» رسیده است. نمره متوسط در موارد استفاده واقعی به گزارشها، در رتبه اول قرار دارد و مدلهای دیگری مانند Llama 3.0 را پشت سر گذاشته است.
در زمینه محاسبات ریاضی و کدنویسی، EXAONE 3.0 نیز در نمره متوسط رتبه اول را کسب کرده و توانایی استدلال قوی دارد.
علاوه بر این، EXAONE 3.0 در میان نمرات متوسط برای موارد استفاده واقعی و معیارهای تکتایی در کره جنوبی نیز رتبه اول را کسب کرده است. این مدل ادعا میکند که زمان استنتاج را به میزان ۵۶%، مصرف حافظه را ۳۵% و هزینههای عملیاتی را ۷۲% نسبت به مدل نسل قبلی خود کاهش داده است.
مدل جدید به گزارشها بر روی ۶۰ میلیون مورد دادههای تخصصی مرتبط با پتنتها، کدها، ریاضیات و شیمی آموزش دیده است. شرکت قصد دارد تا پایان سال، دادههای آموزشی را به ۱۰۰ میلیون مورد در زمینههای مختلف گسترش دهد.
برای کاهش مصرف انرژی در عملیات مدل هوش مصنوعی، تحقیقات هوش مصنوعی الجی بر روی فناوریهای بهینهسازی و سبکی مدل تمرکز کرده و موفق شده است اندازه مدل را به طور چشمگیری ۹۷% کاهش دهد و در عین حال عملکرد را نسبت به EXAONE 1.0 افزایش دهد.