بنابر ادعای مینگ چی کو، انتظار می‌رود رابط کاربری هدست واقعیت افزوده اپل بسیار پیشرفته، نزدیک به زبان انسان و دارای تشخیص بسیار بالا باشد.
مینگ چی کو تحلیلگر محصولات اپل ادعا کرده که هدست واقعیت افزوده اپل شامل چندین ماژول حسگر سه بعدی بسیار حساس است که حرکات دست و چشم‌ها را برای رابط کاربری تشخیص و اشیا نیز به آن اضافه شده است.
این تحلیلگر گفت که انتظار می‌رود نور ساختار یافته هدست واقعیت افزوده و واقعیت ترکیبی اپل قادر به تشخیص تغییر موقعیت کاربر، دست و اشیا در مقابل چشمان کاربر و تغییر جزئیات پویای دست است. با اضافه شدن یک رابط کاربری برای دستگاه هوشمند نزدیک به زبان انسان، این هدست می‌تواند جزئیات حرکات دست را به خوبی تشخیص داده و ثبت کند.
او همچنین توانایی هدست را برای تشخیص گسچرها و حرکات دست توضیح داده است، مثلا هنگامی که کاربر برای رها کردن بالون مجازی، دستان خود را باز می‌کند، این هدست تجربه کامل و جامعی برای او فراهم می‌کند.
مینگ چی کو ارائه یک رابط کاربری با کیفیت بالای نزدیک به زبان انسان را کلید موفقیت اپل در هدست واقعیت افزوده آینده می‌داند. بنابر گفته او، قابلیت‌های این رابط کاربری شامل کنترل ژست‌ها، تشخیص اشیا، ردیابی چشم، تشخیص عنبیه، کنترل صدا، تشخیص پوست، تشخیص بیان و تشخیص فضایی است.
اوایل امسال، وب‌سایت Patently Apple به یک درخواست اپل برای ثبت پتنتی با عنوان « دستگاه‌ها، روش‌ها و رابط کاربری گرافیکی برای تعامل با محیط‌های سه بعدی» اشاره کرده که جزئیات همین مفهوم را نشان می‌دهد.
برای شناسایی عملیاتی که در محیط‌های سه بعدی انجام می‌شود، از حرکات و مکان‌های متفاوت ژست‌های کوچک و پارامترهای حرکتی متنوعی استفاده می‌شود.
استفاده از دوربین‌ها برای ثبت حرکات کوچک برای تعامل با محیط سه بعدی به کاربر اجازه حرکات آزادانه در ارتباط با محیط فیزیکی بدون نیاز به تجهیزات ورودی را می‌دهد و کاربر می‌تواند محیط سه بعدی را به طور طبیعی و کارآمدتری کشف کند.
انتظار می‌رود که اپل اولین نسل هدست واقعیت افزوده خود را در سال ۲۰۲۲ معرفی و رونمایی کند.
اپلیکیشن مولتینا اِستور