دریافت 7 MB
OpenAI روز گذشته از جدیدترین مدل هوش مصنوعی قدرتمند خود، یعنی GPT-4 رونمایی کرد و براساس گزارشهای جدیدی که منتشر شده، یکی از قابلیتهای قابلتوجه آن کمک به افراد دارای اختلالات بینایی است. پروژه Be My Eyes که به افراد نابینا و کمبینا کمک میکند تا از گوشی خود استفاده کنند، با GPT-4 از یک «داوطلب مجازی» هوش مصنوعی پشتیبانی میکند که در هر زمان میتواند به این افراد کمک کند.
یکی از ویژگیهای اصلی Be My Eyes که کار خود را از سال 2015 آغاز کرد، این است که میتواند از دوربین دستگاه کاربران نابینا یا کمبینا کمک بگیرد و توضیحات یا دستورالعملهای دقیقی را به آنها ارائه کند. نسخه جدید برنامه اولین موردی است که قابلیت چندوجهی GPT-4 به آن اضافه شده و علاوه بر چتکردن، برای بررسی و درک تصاویر گرفتهشده و موارد بسیار زیاد دیگری نیز کاربرد دارد.
نحوه کمک هوش مصنوعی GPT-4 به افراد کمبینا
با وجود این قابلیت، کاربران میتوانند تصاویر را از طریق برنامه برای یک داوطلب مجازی مجهز به هوش مصنوعی ارسال کنند که به هر سؤالی در مورد آن تصویر پاسخ میدهد و برای طیف گستردهای از وظایف، کمکهای بصری آنی ارائه میکند.
به عنوان مثال، اگر کاربر تصویری از داخل یخچال خود ارسال کند، داوطلب مجازی نهتنها میتواند چیزهایی را که داخل آن وجود دارد، بهدرستی شناسایی کند، بلکه میتواند چیزی را که میتوان با آن مواد تهیه کرد نیز تجزیهوتحلیل کند. این ابزار همچنین میتواند برای آن مواد دستورالعملهایی ارائه دهد و راهنمای گامبهگام نحوه درستکردن آنها را نیز به کاربران اعلام کند.
در ویدیویی که از این قابلیت منتشر شده است و در بالا میتوانید آن را مشاهده کنید، یکی از کاربران Be My Eyes در انجام برخی کارها و درخواستهای خود مانند توصیف ظاهر لباس، شناسایی یک گیاه و حتی ترجمه از این داوطلب مجازی کمک میگیرد.
درحالحاضر این ویژگی برای دسته کوچکی از کاربران Be My Eyes بهعنوان یک نسخه بتای بسته منتشر شده است و در هفتههای آینده در دسترس افراد بیشتری قرار خواهد گرفت.
227227
