گوگل روی دو ویژگی جدید و کاربردی Gboard با کمک دوربین گوشی و هوش مصنوعی کار می‌کند

ویژگی جدید Sign-to-text در Gboard چگونه کار می‌کند؟

ویژگی جدید Sign-to-text در Gboard به‌گونه‌ای طراحی شده است که با استفاده از دوربین گوشی، ویدیویی از حرکات زبان اشاره کاربر ثبت کرده و سپس با کمک هوش مصنوعی آن‌ها را به متن تبدیل کند.

بر اساس توضیحات کشف‌شده درباره این ویژگی، متن تولیدشده می‌تواند در کاربردهای مختلفی مانند ارسال پیام، نوشتن ایمیل و جست‌وجوی وب مورد استفاده قرار گیرد. به این ترتیب، کاربران واجد شرایط می‌توانند به‌جای تایپ مستقیم، از زبان اشاره به‌عنوان یکی از روش‌های ورود متن در اندروید استفاده کنند.

البته این قابلیت هنوز در مرحله توسعه قرار دارد و جزئیات مربوط به نحوه عملکرد نسخه نهایی یا دستگاه‌هایی که از آن پشتیبانی خواهند کرد، مشخص نشده است.

پردازش ویدیو با تمرکز بر حفظ حریم خصوصی

یکی از نکات مهم درباره قابلیت تبدیل زبان اشاره به متن با هوش مصنوعی، نحوه پردازش ویدیوی کاربران است. طبق توضیحات گوگل، ویدیوی اصلی که با دوربین گوشی ضبط می‌شود، هرگز از دستگاه کاربر خارج نخواهد شد.

این ویدیو ابتدا روی خود دستگاه پردازش می‌شود تا حرکات و کلماتی که کاربر با زبان اشاره بیان می‌کند از محتوای ویدیو تفکیک شوند. سپس داده‌های مربوط به این حرکات و کلمات برای پردازش و تحلیل به گوگل ارسال خواهند شد.

گوگل اعلام کرده است این داده‌ها پس از آنکه دیگر برای پردازش مورد نیاز نباشند، حذف می‌شوند. این رویکرد باعث می‌شود فایل ویدیویی اصلی کاربر مستقیماً برای پردازش به سرورهای گوگل ارسال نشود.

ویژگی جدید Gboard

تشخیص نور نامناسب هنگام استفاده از زبان اشاره

در بررسی کدهای مرتبط با قابلیت جدید Gboard، یک رشته متنی نیز مشاهده شده که نشان می‌دهد سیستم می‌تواند نامناسب بودن شرایط نوری را تشخیص دهد.

«نور ضعیف است. سعی کنید به مکان روشن‌تری بروید.»

وجود چنین پیامی نشان می‌دهد کیفیت تصویر دوربین نقش مهمی در تشخیص صحیح حرکات زبان اشاره خواهد داشت. در صورت کافی نبودن نور محیط، Gboard احتمالاً از کاربر می‌خواهد شرایط تصویربرداری را بهبود دهد تا حرکات با دقت بیشتری ثبت و پردازش شوند.

آیا Gboard از زبان اشاره آمریکایی ASL پشتیبانی می‌کند؟

در حال حاضر مشخص نیست قابلیت Sign-to-text گوگل در زمان عرضه از کدام زبان‌ها یا استانداردهای زبان اشاره پشتیبانی خواهد کرد.

متن اصلی به احتمال پشتیبانی از زبان اشاره آمریکایی (American Sign Language یا ASL) اشاره می‌کند، اما این موضوع هنوز به‌صورت رسمی از سوی گوگل تأیید نشده است. با توجه به وجود زبان‌های اشاره مختلف در کشورهای گوناگون، پشتیبانی زبانی یکی از مهم‌ترین جزئیات نامشخص این قابلیت محسوب می‌شود.

بنابراین تا زمان انتشار اطلاعات رسمی، نمی‌توان با قطعیت گفت که Sign-to-text هنگام عرضه از ASL یا چه تعداد زبان اشاره دیگر پشتیبانی خواهد کرد.

قابلیت جدید Gboard برای کنترل فاصله خودکار کلمات پیشنهادی

در کنار تبدیل زبان اشاره به متن، گوگل تغییر کاربردی دیگری را نیز برای کیبورد Gboard آزمایش می‌کند. این تغییر به نحوه اضافه شدن فاصله پس از انتخاب یک کلمه از نوار پیشنهادها و تصحیح خودکار مربوط می‌شود.

در حالت معمول، وقتی کاربر یکی از کلمات پیشنهادی را انتخاب می‌کند، Gboard به‌صورت خودکار یک فاصله بعد از آن قرار می‌دهد. این رفتار هنگام تایپ یک جمله مفید است، اما زمانی که کاربر قصد دارد بلافاصله علامت نگارشی یا کاراکتر دیگری را به کلمه اضافه کند، ممکن است مطلوب نباشد.

گزینه جدیدی با عنوان Auto-space after suggestions در تنظیمات Corrections & suggestions مشاهده و فعال شده است.

عملکرد این گزینه ساده است:

• در حالت فعال: پس از انتخاب کلمه پیشنهادی، Gboard به‌صورت خودکار یک فاصله اضافه می‌کند.
• در حالت غیرفعال: فاصله خودکار پس از کلمه پیشنهادی اضافه نمی‌شود و کاربر کنترل بیشتری برای وارد کردن علائم نگارشی یا کاراکترهای بعدی دارد.

آزمایش انجام‌شده روی این قابلیت نشان داده است که گزینه مذکور پس از فعال‌سازی کار می‌کند؛ بااین‌حال، در دسترس بودن آن در نسخه آزمایشی به معنی عرضه قطعی برای همه کاربران نیست.

کنترل فاصله خودکار کلمات پیشنهادی

زمان انتشار قابلیت تبدیل زبان اشاره به متن Gboard مشخص نیست

در حال حاضر، گوگل زمان مشخصی برای عرضه عمومی Sign-to-text در Gboard اعلام نکرده است. این ویژگی از طریق بررسی نسخه بتای Gboard شناسایی شده و هنوز اطلاعاتی درباره فهرست گوشی‌های سازگار، زبان‌های اشاره پشتیبانی‌شده یا زمان انتشار نهایی آن وجود ندارد.

جی‌بورد کیبورد پیش‌فرض بسیاری از گوشی‌های اندرویدی است؛ بنابراین در صورت عرضه گسترده Sign-to-text، قابلیت تبدیل زبان اشاره به متن می‌تواند مستقیماً در یکی از پرکاربردترین ابزارهای ورود متن در اکوسیستم اندروید در دسترس قرار گیرد.

جمع‌بندی

گوگل در حال توسعه دو قابلیت جدید برای کیبورد Gboard است که مهم‌ترین آن‌ها تبدیل زبان اشاره به متن با کمک هوش مصنوعی است. قابلیت Sign-to-text با استفاده از دوربین گوشی حرکات زبان اشاره را دریافت می‌کند و با پردازش مبتنی بر هوش مصنوعی، امکان تبدیل آن‌ها به متن را فراهم خواهد کرد؛ درحالی‌که ویدیوی اصلی کاربر روی دستگاه باقی می‌ماند. در کنار آن، امکان کنترل فاصله خودکار پس از انتخاب کلمات پیشنهادی نیز می‌تواند تجربه تایپ با Gboard را انعطاف‌پذیرتر کند. بااین‌حال، هر دو قابلیت در مرحله آزمایش و توسعه قرار دارند و هنوز زمان عرضه عمومی آن‌ها مشخص نشده است.

نظر شما درباره قابلیت Sign-to-text چیست؟ آیا تبدیل مستقیم زبان اشاره به متن می‌تواند به یکی از مهم‌ترین قابلیت‌های دسترس‌پذیری Gboard و اندروید تبدیل شود؟