شرکت «متا» قابلیت ترجمه صوتی زنده جدید خود را به صورت جهانی عرضه کرد. این قابلیت موسوم به «Reels» از هوش مصنوعی مولد برای ترجمه صدای شما، با قابلیت لبخوانی اختیاری استفاده میکند. «مارک زاکربرگ» اولین بار این قابلیت را در رویداد «Meta Connect ۲۰۲۴» به پیشنمایشی معرفی کرد.
به نقل از انگجت، فعلا این قابلیت فقط برای ترجمه از زبان انگلیسی به زبان اسپانیایی و برعکس در دسترس است. «متا» میگوید زبانهای بیشتری بعداً اضافه خواهند شد.
در ابتدا، این قابلیت محدود به فیسبوکیها با بیش از ۱۰۰۰ دنبالکننده بود. با این حال، اکنون هر کسی که یک حساب کاربری عمومی در اینستاگرام داشته باشد، میتواند از آن استفاده کند.
این ابزار روی صدای شما آموزش میبیند و یک آهنگ صوتی ترجمه شده تولید میکند تا با لحن شما مطابقت داشته باشد. سپس افزونه لبخوانی، حرکات دهان شما را با گفتار ترجمه شده مطابقت میدهد. کلیپ نمایشی که این شرکت سال گذشته نشان داد، به طرز عجیبی دقیق بود.
برای استفاده از این قابلیت، قبل از انتشار یک «ریل»، گزینه «ترجمه صدای خود با هوش مصنوعی متا» را انتخاب کنید. همچنین در اینجا میتوان همگامسازی لب (لبخوانی) را اضافه کرد. همچینن گزینهای برای بررسی نسخه ترجمه شده توسط هوش مصنوعی قبل از انتشار وجود دارد. ضمن اینکه بینندگان آن «ریل»، یک پنجره را مشاهده میکنند که نشان میدهد این یک محصول ترجمه شده توسط هوش مصنوعی است.
«متا» میگوید این ویژگی برای ویدئوهای رو در رو بهترین عملکرد را دارد. این شرکت توصیه میکند از پوشاندن دهان یا پخش موسیقی پسزمینه بیش از حد خودداری شود.
این ویژگی برای حداکثر دو گوینده کار میکند، اما بهتر است از همپوشانی گفتار و همزمان صحبت کردن خودداری شود.
«متا» این ویژگی را به عنوان راهی برای سازندگان برای گسترش مخاطبان خود فراتر از زبانهای مادریشان ارائه میدهد. به همین دلیل، یک ردیاب عملکرد بر اساس زبان را در نظر گرفته است، بنابراین میتوان دید که در هر زبان چقدر خوب عمل میکند.
«یوتیوب» سال گذشته ویژگی مشابهی را راهاندازی کرد. «اپل» نیز وارد این عرصه شده است و برنامههای پیامرسان، تلفن و فیستایم آن در سیستم عامل iOS ۲۶ دارای ابزار ترجمه زنده هستند.