Google, YouTube için gerçek zamanlı dublaj hizmetini test ediyor

avuç içi 2Bard da dahil olmak üzere AI özelliklerini Google ekosistemine sorunsuz bir şekilde entegre edin, Google G/Ç 2023 etkinliğin ana temalarından biri haline geldi. Ancak Google, bazı özelliklerin hemen yayınlanmaması gerektiğine inanıyor. Bu sırada PaLM 2, Google’ın makine öğrenimi ve yapay zeka araştırmalarına dayanan yeni nesil büyük dil modeli olarak biliniyor.

Google I/O konuşmasında, şirketin teknoloji ve toplumdan sorumlu kıdemli başkan yardımcısı James Manyikayanlış bilgi ve bazı yapay zeka yetenekleri yani yapay zeka aracılığıyla yapılabilecek dezenformasyonu dile getirdi. Manyika’nın bahsettiği şey, derin sahte çalışmavideoları seslendirmek için kullandıkları dil modelleri.

Google, bu teknolojinin suiistimal edilme potansiyeline sahip olduğunu düşünerek bazı adımlar atmayı ihmal etmemiş. Şimdilik test aşamasında prototip olarak yayınlandı. Evrensel Tercüman” özelliği şimdiden geliştiricilerin ilgi odağı haline geldi.

Google’ın Evrensel Tercümanı, konuşmaları gerçek zamanlı olarak çevirebilir. Bir görüntüyü izlerken başka bir dilde söylenenleri anında görebilir ve okuyabilirsiniz. Bir nevi deneysel. yapay zeka video dublaj hizmetiolduğunu söyleyebiliriz.

prototip, etkinlik sırasında Arizona Devlet ÜniversitesiGoogle ile ortaklaşa oluşturulan bir çalışmadan alınan görüntüler üzerinden sergilendi, ilk sonuçların umut verici olduğunu söylüyor.

Model 4 aşamada çalışmaktadır. Birinci adımda model, bir görüntüdeki dudak hareketlerini tanıdığı sözcüklerle eşleştirir. Adım 2, anında konuşma üretimi sağlayan bir algoritmayı tetikler. Modelin 3. Aşaması, çeviriye yardımcı olmak için konuşmacının doğal konuşma yüzünün yükselişini ve düşüşünü ölçen tonlamayı kullanır. Son olarak, konuşmacının dudak hareketlerinin stilini kopyalayıp tonu eşleştirdikten sonra çeviriyi oluşturmak için hepsini bir araya getiriyor.

Universal Translator özelliği, küçük bir dizi test dışında şu anda kullanılamıyor. Google bu özelliği test ettikten sonra, YouTube ve video konferans hizmeti Google Meethizmetlere açılabilir.