मल्टीमॉडल इंटरैक्शन मनुष्यों के लिए किसी दिए गए कार्य को करने के लिए समन्वित तरीके से समझने और कार्य करने का एक स्वाभाविक तरीका है। इसमें 5 इंद्रियाँ शामिल हैं, जैसे स्पर्श (हैप्टिक्स), दृष्टि, श्रव्य, गंध और स्वाद। इस प्रकार, भारतीय प्रौद्योगिकी संस्थान जोधपुर में इलेक्ट्रिकल इंजीनियरिंग विभाग में मल्टीमॉडल इंटरैक्शन लैब (MIL) मौलिक और अनुप्रयुक्त अनुसंधान करने का प्रयास करता है जो निम्न में मदद करता है: 1) यह समझना कि मनुष्य कैसे बातचीत करते हैं और उत्तेजनाओं पर प्रतिक्रिया करते हैं, 2) कम्प्यूटेशनल मॉडल विकसित करना जो मानव धारणा में महत्वपूर्ण कार्यक्षमता की नकल कर सकते हैं, 3) AR/VR, इमर्सिव मल्टीमीडिया और मेडिकल डोमेन जैसे विविध अनुप्रयोगों के लिए इंटरैक्टिव सिस्टम डिज़ाइन करना, 4) 3D ऑब्जेक्ट्स और दृश्यों के मॉडलिंग और प्रतिनिधित्व के लिए कुशल एल्गोरिदम डिज़ाइन करना, 5) 3D पुनर्निर्माण, ऑब्जेक्ट डिटेक्शन और मान्यता और निम्न-स्तरीय दृष्टि अनुप्रयोगों के लिए कुशल एल्गोरिदम डिज़ाइन करना, 6) दृश्य से वांछित जानकारी को समझने के लिए उपन्यास कम्प्यूटेशन आधारित इमेजिंग सिस्टम डिज़ाइन करना, और 6) वास्तविक समय के अनुप्रयोगों के लिए अत्याधुनिक मल्टीमॉडल-सूचना प्रसंस्करण विधियों को विकसित करना। एमआईएल मुख्य रूप से निम्नलिखित दो उप-विषयों पर केंद्रित है:

1. कम्प्यूटेशनल विज़न और ज्यामिति प्रसंस्करण प्रयोगशाला
2. मल्टीमॉडल परसेप्शन प्रयोगशाला

उपकरण: हैप्टिक इंटरफेस: फैंटम प्रीमियम 1.5 एचएफ/6 डीओएफ, ओमेगा 3.0, फैंटम प्रीमियम 1.5, डिस्प्ले, रोबोटिक मैनिपुलेटर यूआर3, फोर्स/टॉर्क सेंसर, लिडार स्कैनर, आरजीबी-डी कैमरा, आईट्रैकर, कैमरा, एंबिसोनिक-माइक्रोफोन, वर्कस्टेशन (सर्वर)

शोध परियोजनाएं

1. डेटा-संचालित हैप्टिक मॉडलिंग और इनहोमोजेनस विस्कोलेस्टिक डिफॉर्मेबल ऑब्जेक्ट्स पर सामान्य इंटरैक्शन का प्रतिपादन [दिसंबर 2020-दिसंबर 2022] (वित्त पोषण एजेंसी: डीएसटी एसईआरबी, 33 लाख)। पीआई: डॉ. अमित भाद्वाज
2. रोबोट असिस्टेड डेंटिस्ट्री के लिए टेलीप्रेजेंस और टेलीएक्शन सिस्टम [दिसंबर 2021-दिसंबर 2024] (वित्त पोषण एजेंसी: आईएचएफसी आईआईटी दिल्ली, राशि: 129 लाख) पीआई: डॉ. अमित भारद्वाज, सह-पीआई: डॉ. सुरील शाह, डॉ. विनीत गोखले (टीयू डेल्फ़्ट), डॉ. अंकिता चुघ (एम्स जोधपुर)
3. हैप्टिक कैमरा: टेक्सचर्ड सतहों के लिए विभिन्न सेंसिंग तौर-तरीकों के बीच अंतर-संबंध [मार्च 2022-मार्च। 2025] (वित्त पोषण एजेंसी: सीड ग्रांट आईआईटी जोधपुर, राशि: 21.43 लाख), पीआई: डॉ. अमित भारद्वाज
4. पेट की धड़कन और नाड़ी व्यवहार के लिए हैप्टिक्स आधारित मेडिकल सिम्युलेटर [अक्टूबर 2022-सितंबर। 2025] [वित्त पोषण एजेंसी: आईहब दृष्टि, राशि: लगभग 62 लाख), पीआई: डॉ. अमित भारद्वाज, सह-पीआई: डॉ. हिमांशु कुमार, डॉ. मनीष नरवारिया, डॉ. राजेंद्र नागर और डॉ. भरत चौधरी (एम्स जोधपुर)
5. आंशिक बिंदु क्लाउड से प्रतिबिंब समरूपता आधारित 3डी सतह पुनर्निर्माण और बहाली, पीआई: डॉ. राजेंद्र नागर, वित्त पोषण एजेंसी: एसईआरबी, समाप्ति तिथि: दिसंबर 2023, थीम: 3डी कंप्यूटर विजन और ज्यामिति प्रसंस्करण
6. अज्ञात वातावरण में स्वायत्त ग्राउंड वाहनों का वास्तविक समय 3डी दृश्य पुनर्निर्माण और स्थानीयकरण, पीआई: डॉ. राजेंद्र नागर, वित्त पोषण एजेंसी: आईहब-दृष्टि, टीआईएच आईआईटी जोधपुर, समाप्ति तिथि: अप्रैल 2025, थीम: 3डी कंप्यूटर विजन और रोबोटिक्स
7. आंशिक 3डी स्कैन से एनिमेटेबल मानव 3डी सतह पुनर्निर्माण, पीआई: डॉ. राजेंद्र नागर, वित्त पोषण एजेंसी: आईआईटी जोधपुर, अंतिम तिथि: अक्टूबर 2024, थीम: 3डी कंप्यूटर विज़न और ज्यामिति प्रसंस्करण
8. ऑब्जेक्ट-आधारित 3डी स्थानिक ऑडियो रेंडरिंग फॉर ऑगमेंटेड एंड वर्चुअल रियलिटी एप्लीकेशन, पीआई: मनीष नरवरुआ, फंडिंग एजेंसी: एसईआरबी, एडन तिथि: दिसंबर 2022, थीम: ऑगमेंटेड एंड वर्चुअल रियलिटी
9. विजुअल इंटेलिजेंस के लिए वाइड एरिया सेंसिंग, पीआई: मनीष नरवरिया, फंडिंग एजेंसी: आईहब-दृष्टि, टीआईएच आईआईटी जोधपुर, अंतिम तिथि: अप्रैल 2024, थीम: कंप्यूटर विज़न और रोबोटिक्स

एसोसिएटेड फैकल्टी सदस्य

1. अमित भारद्वाज
2. हिमांशु कुमार
3. मनीष नरवारिया
4. राजेंद्र नागर

विद्यार्थी

1. कृति दत्ता
2. रवि प्रकाश मेघवंशी
3. बरूरी साई अविनाश
4. दीपांशु सिंह सोलंकी
5. बसंत