الباحثون

هيون سونغ

المنشورات 2

نسخة أولية وصول مفتوح

GeoBridge-VLA: التكيف المتبقي المدرك للهندسة لنماذج الرؤية واللغة والفعل

تُرمّز نماذج الرؤية واللغة والفعل (VLA) المعلومات الدلالية المكتسبة من التدريب المسبق على الرؤية واللغة، لكن التلاعب يتطلب أيضاً استدلالاً مكانياً دقيقاً. نقدم GeoBridge-VLA، وهو أسلوب من مرحلتين لتعلم الميزات الهندسية من المُشفّر البصري المجمّد لنموذج VLA مدرب مسبقاً، ثم استخدامها للتنبؤ بالفعل. تدرّب المرحلة الأولى ج …

نسخة أولية وصول مفتوح

SPACE-CLIPv2: فك تشفير الهندسة المحلية من CLIP المجمّد لتقدير العمق أحادي العين

تمنح نماذج الأساس للرؤية واللغة مثل CLIP تمثيلات دلالية قوية، لكن رموز الرقع فيها غير مُحسَّنة بشكل مباشر لهندسة المتري الكثيفة. وقد أظهر SPACE-CLIP أن سمات CLIP المجمّدة يمكن أن تدعم تقدير العمق الأحادي عبر دمج السمات بين مجموعات الطبقات، لكنه لم يحدد كيف ينبغي دمج رموز CLIP المجاورة لاستعادة البنية المحلية الدقيقة. ن …

المؤلفون المشاركون