بایت‌دنس مدل Seed3D 1.0 را معرفی کرد؛ تبدیل عکس به مدل سه‌بعدی
تکنولوژی

معرفی مدل Seed3D 1.0؛ انقلابی در تولید محتوای سه‌بعدی با هوش مصنوعی

بایت‌دنس، شرکت مادر تیک‌تاک، از یک ابزار هوش مصنوعی پیشرفته به نام Seed3D 1.0 رونمایی کرده است. این ابزار قادر است تصاویر دوبعدی را به مدل‌های سه‌بعدی کامل و آماده شبیه‌سازی تبدیل کند.

Seed3D 1.0 یک مولد مدل سه‌بعدی معمولی نیست؛ بلکه ابزاری پیشرفته با قابلیت تبدیل تصاویر دوبعدی به مدل‌های سه‌بعدی با کیفیت بالا است. این ابزار نه تنها با رقبای متن‌باز، بلکه با رقبای بسته نیز در کیفیت بافت و هندسه رقابت می‌کند.

نکته قابل توجه در مورد Seed3D 1.0، تعداد پارامترهای آن است. این ابزار با تنها ۱.۵ میلیارد پارامتر، مدل‌های بزرگ‌تری مانند Hunyuan3D 2.1 (با ۳ میلیارد پارامتر) را شکست داده است.

استراتژی تولید گام به گام در Seed3D 1.0

نوآوری اصلی در Seed3D 1.0، استراتژی تولید گام به گام آن است:

پیشنهاد مطالعه: شرایط پیش فروش سانگ یانگ موسو خان منتشر شد [اردیبهشت 1404]_آینده نوین

  • ابتدا، تصویر ورودی توسط یک مدل زبان-بینایی (VLM) تحلیل می‌شود تا اشیا و نشانه‌های فضایی آنها استخراج شود.
  • سپس، برای هر شیء شناسایی‌شده، یک مدل سه‌بعدی مجزا تولید می‌کند.
  • در نهایت، تمام مدل‌های سه‌بعدی مجزا براساس چیدمان فضایی پیش‌بینی‌شده توسط VLM در یک صحنه کامل مونتاژ می‌شوند.

خروجی آماده شبیه‌سازی

برخلاف بسیاری از مدل‌های دیگر، خروجی Seed3D 1.0 فقط برای اهداف تحقیقاتی یا رندرهای ساده نیست؛ بلکه این مدل‌ها «آماده شبیه‌سازی» هستند.

این مدل‌ها می‌توانند مستقیماً در پلتفرم‌های شبیه‌سازی مانند Isaac Sim (متعلق به انویدیا) برای آموزش ربات‌ها ادغام شوند.

وقتی مدل سه‌بعدی در شبیه‌ساز بارگذاری می‌شود، VLM مقیاس واقعی شیء را تخمین می‌زند و Isaac Sim به‌طور خودکار مش‌های برخورد (Collision Mesh) را برای آن تولید می‌کند.

پیشنهاد مطالعه: مدیرعامل اپل تأيید کرد: ویژن پرو امسال در چین اراعه می‌شود_آینده نوین

این امکان، شبیه‌سازی‌های فیزیکی مانند برداشتن اشیا توسط بازوی رباتیک را بلافاصله و بدون تنظیمات دستی زمان‌بر ممکن می‌سازد.

آخرین مطالب

قابلیت‌های Seed3D 1.0

Seed3D 1.0 می‌تواند صحنه‌های کامل بسازد؛ این ابزار قابلیت ساخت یک شی واحد (مانند یک صندلی) یا یک صحنه داخلی کاملاً پرجزئیات (مانند یک دفتر کار) و حتی یک منظره شهری در مقیاس بزرگ را دارد.

براساس ارزیابی‌های انسانی، Seed3D 1.0 در ۶ بُعد مهم از جمله جزئیات دقیق و بازسازی ویژگی‌های پیچیده، عملکردی رقابتی و قوی از خود نشان داده و در بنچمارک‌های ارزیابی هندسه (مانند ULIP-I و Uni3D-I) نیز از رقبای خود پیشی گرفته است.