AI اور دنیا کے مشکل مسائل · نظریاتی کمپیوٹر سائنس · Nature (computational biology) · 2026-10-23

سیگمنٹیشن ماسک کے انضمام کے ساتھ انسان اور شے کے تعامل کی پیش گوئی کے لیے فاؤنڈیشن ماڈل پر مبنی فریم ورک

اصل عنوان: Foundation model-driven framework for human–object interaction prediction with segmentation mask integration

انسان اور شے کے تعامل کی شناخت میں زیادہ تر ڈیٹیکشن پر مبنی طریقے استعمال ہوتے رہے ہیں۔ Seg2HOI سیگمنٹیشن پر مبنی ایک وژن فاؤنڈیشن ماڈل کو، جسے منجمد رکھا جاتا ہے، شامل کرتا ہے اور ایسے چوگنے (quadruplets) کی پیش گوئی کرتا ہے جو معیاری سہ گنوں (triplets) میں انسان اور شے کے جوڑوں کے لیے سیگمنٹیشن ماسک کا اضافہ کرتے ہیں۔ یہ دو عوامی بینچ مارکس پر جدید ترین طریقوں کے مقابل کارکردگی حاصل کرتا ہے، حتیٰ کہ zero-shot ترتیبات میں بھی، اور ایسے متنی اور بصری پرامپٹس سے جو تربیت میں استعمال نہیں ہوئے، چوگنے اور انٹرایکٹو سیگمنٹیشن تیار کر سکتا ہے۔

اصل تحریر پڑھیں ↗

تمام آئٹمز →