استارتاپ Thinking Machines Lab متعلق به میرا موراتی، مدیر اجرایی سابق OpenAI، روز چهارشنبه ۱۵ جولای اولین مدل هوش مصنوعی توسعه‌یافته داخلی خود به نام Inkling را راه‌اندازی کرد.

اینکلینگ یک مدل هوش مصنوعی با وزن باز است که برای ارائه پاسخ‌های کالیبره شده، پیروی از دستورالعمل‌ها و مقاومت در برابر سانسور آموزش دیده است. همچنین به کاربران اجازه می‌دهد تا بر اساس ترجیحات خود، تلاش فکری مدل را در ازای سرعت، کم یا زیاد کنند.

در حالی که شرکت Thinking Machines، Inkling را به عنوان یک مدل عمومی که در وظایف عامل‌محور، کدنویسی و استدلال آموزش دیده است، توصیف کرده است، خروجی‌های آن در حال حاضر به متن در قالب کد، مصنوعات سبک‌دار، داده‌های ساختاریافته یا موارد دیگر محدود می‌شود. این شرکت اعلام کرد: «این وسعت برای سفارشی‌سازی و استفاده در دنیای واقعی اهمیت دارد: کاربران مختلف به مدل‌هایی نیاز دارند که بتوانند با گردش‌های کاری بسیار متفاوت سازگار شوند، نه اینکه فقط در معیارها برتری داشته باشند.»

شرکت Thinking Machines رویکردی متفاوت از آزمایشگاه‌های رقیب خود مانند OpenAI، Anthropic و گوگل در پیش گرفته است تا این مدل را تحت مجوز متن‌باز منتشر کند. این بدان معناست که وزن‌های مدل به صورت رایگان در دسترس توسعه‌دهندگان و شرکت‌های خارجی قرار دارد تا از HuggingFace دانلود کرده و مستقیماً آنها را تغییر دهند.

اینکلینگ در حالی وارد بازار می‌شود که حمایت از توسعه متن‌باز دوره‌های آموزشی سطح پایین (LLM) در ایالات متحده رو به افزایش است، که بخشی از آن به دلیل محدودیت‌های ناگهانی کاخ سفید بر مدل‌های جدید و پیشرفته هوش مصنوعی منتشر شده توسط شرکت‌های پیشرو در زمینه هوش مصنوعی مانند Anthropic و OpenAI است.

با سرمایه‌گذاری در Inkling، مدیر ارشد فناوری سابق OpenAI، شرط می‌بندد که مدل‌های هوش مصنوعی که به شرکت‌ها اجازه می‌دهند خودشان را با شرایط وفق دهند، از LLM های یکسان و یکسان که توسط اکثر آزمایشگاه‌های هوش مصنوعی پیشرو در ایالات متحده ارائه می‌شوند، عملکرد بهتری خواهند داشت. Thinking Machines Lab برای ارائه خدمات به شرکت‌ها، Inkling را به عنوان مدلی برای سازمان‌ها قرار می‌دهد تا از طریق Tinker، پلتفرم سفارشی‌سازی مدل این استارتاپ، خود را به طور دقیق تنظیم کنند.

با این حال، این می‌تواند به این معنی نیز باشد که سازمان‌ها مسئول اطمینان از ایمن و مطمئن بودن نسخه تنظیم‌شده Inkling خود خواهند بود. برخلاف OpenAI و Anthropic که برای دسترسی محدود به مدل‌های خود هزینه دریافت می‌کنند، Thinking Machines به دنبال کسب درآمد نه از خود مدل، بلکه از طریق اکوسیستم میزبانی اطراف آن از طریق Tinker است.

شرکت Thinking Machines اکنون تقریباً ۲۰۰ نفر را استخدام می‌کند که نسبت به سطوح گزارش‌شده پس از موجی از خروج‌ها در اوایل امسال، از جمله دو بنیانگذار که در ژانویه به OpenAI پیوستند، افزایش یافته است.

زیر کاپوت اینکلینگ

اینکلینگ یک LLM با ۹۷۵ میلیارد پارامتر است و از یک پنجره زمینه‌ای یک میلیون توکن پشتیبانی می‌کند. با این حال، برای هر وظیفه مشخص، تنها از کسری از تعداد کل پارامترهای خود، یا حدود ۴۱ میلیارد، استفاده می‌کند. این امر در درجه اول به دلیل معماری ترکیبی از متخصصان (MoE) است، یک طراحی رایج که اجرای مدل‌های بسیار بزرگ را سریع‌تر و ارزان‌تر می‌کند.

طبق پست وبلاگ این شرکت، اینکلینگ توسط محققان شرکت Thinking Machines از ابتدا و بر روی ۴۵ تریلیون توکن متن، تصویر، صدا و ویدیو آموزش دیده و به صورت بومی در هر چهار مورد استدلال می‌کند.

محققان گفتند که در مرحله پیش از آموزش، از مدل‌های وزن باز دیگری مانند Kimi 2.5 شرکت Moonshot AI برای کمک به تولید برخی از مجموعه داده‌های اولیه پس از آموزش، قبل از انجام یادگیری تقویتی در مقیاس بزرگ، استفاده کرده‌اند. به گفته این شرکت، LLM بعدی توسعه‌یافته توسط این شرکت از داده‌های پس از آموزش کاملاً مستقل استفاده خواهد کرد.

کمپانی مبتکران نیک افزار 

به لطف همکاری با انویدیا، شرکت Thinking Machines، اینکلینگ را به‌طور کامل بر روی سیستم‌های GB300 NVL72 این تولیدکننده تراشه آموزش داد . این دو شرکت در ماه مارس امسال قراردادی را برای استقرار یک گیگاوات ظرفیت محاسباتی Vera Rubin امضا کردند.

معیارهای عملکرد

در یک بنچمارک کدنویسی، شرکت Thinking Machines ادعا کرد که Inkling در حالی که تنها از یک سوم توکن‌های مصرف‌شده توسط آخرین نسل مدل open-weight این شرکت تراشه‌ساز استفاده می‌کرد، به امتیازهایی هم‌رده با Nemotron 3 Ultra انویدیا دست یافت. Inkling همچنین آموزش دیده است تا با ویژگی تفکر قابل کنترل، در انواع مختلف مهارهای کدنویسی و عامل اجرا شود.

همچنین بخوانید | استارتاپ هوش مصنوعی میرا موراتی، Thinking Machines، در مراحل اولیه جذب سرمایه، ۱۲ میلیارد دلار ارزش‌گذاری شد

با این حال، این شرکت اعلام کرد که Inkling «قوی‌ترین مدل کلی موجود امروز، چه باز و چه بسته، نیست.» در عوض، ترکیبی از ویژگی‌ها، آن را به یک پایگاه وزن باز خوب برای سفارشی‌سازی تبدیل می‌کند: قابلیت‌های چندوجهی، تفکر کارآمد و در دسترس بودن در Tinker برای تنظیم دقیق. Inkling فقط شروع کار است: اولین نسخه ما در یک خانواده مدل که به توسعه آن ادامه خواهیم داد.»

در کنار Inkling، این شرکت همچنین پیش‌نمایشی از یک نسخه مدل سبک‌تر به نام Inkling-Small با ۱۲ میلیارد پارامتر فعال را ارائه داد که با هزینه و تأخیر حتی کمتر، به عملکرد قوی دست می‌یابد.