İş kulaklıkları tercümanı Timekettle W4 Pro yapay zeka ile test edildi: Star Trek'in tricorder'ı mı yoksa sonunda babel balığı mı?

Bir gerçeği hemen açıklığa kavuşturmak için: W4 Pro, tercüme için bir akıllı telefonun yerini almaz, Timekettle uygulaması kullanım için mutlak bir ön koşuldur, AI işlevlerinin ilk kullanılabilir olduğu yer burasıdır ve uygulama bağlantısı olmadan bire bir konuşma bile mümkün değildir.

Çevrimdışı çeviri yapmak da mümkün, ancak o zaman "sadece" 13 dil mevcut. Tercümanların tüm yetenekleri yalnızca çevrimiçi olarak ortaya çıkıyor. W4 Pro 40 dile çeviri yapabiliyor ve 93 aksana hakim olduğu söyleniyor.

Üreticiler neredeyse kesintisiz çeviri hızına özellikle dikkat ediyor. Tepki süresinin sadece 0,2 saniye olduğu söyleniyor.

Kulaklıklar bunun için önemli. Örneğin kulak içi kulaklıklara sahip Timekettle X1'in aksine, W4 Pro açık bir tasarıma sahip ve bu çok mantıklı. Sonuçta, kulak içi kulaklıklar, özellikle bire bir görüşmelerde iki kulaklıktan birini diğer kişiye verdiğinizde hijyenik olmayabilir. W4 Pro'nun aksine, açık tasarım, önceki kullanıcının kulak kirinin kulaklığa yapışması konusunda endişelenmenize gerek olmadığı anlamına geliyor. Bu aynı zamanda kendi sesinizi duymanızı da kolaylaştırır, bunun da avantajları vardır. İki kulaklığın her birine yerleştirilmiş üç mikrofon, söylenenlerin hassas bir şekilde kaydedilmesini sağlamak ve önemsiz sesleri filtrelemek için tasarlanmıştır.

Kulaklıkların kendileri çoğunlukla plastikten yapılmıştır. Kulaktaki yerlerini koruyorlar, ancak takan kişi başını biraz hızlı hareket ettirirse biraz sallanıyorlar. Küçük, renkli bir LED, şarj edildiklerini veya şarj kutusuna yerleştirildiklerini gösterir. Su sıçramasına karşı koruma ya da başka bir özellik bulunmuyor. W4 Pro ayrıca kulak üstü kulaklıklar için bile oldukça büyüktür. Karşılaştırma için Marshall Motif II A.N.C. kulak içi tomurcukları.

Şarj kutusu daha da büyük ve biraz sıra dışı. Dış çerçeve alüminyumdan yapılmıştır, geri kalanı plastiktir. İki yarıya bölünebilir, böylece çıplak kulaklıkları bir konuşma partnerine uzatmak zorunda kalmazsınız, bunun yerine şarj kutusundaki ahizeyi teslim edebilirsiniz. Bununla birlikte, kutunun boyutu W4 Pro'nun hantal olduğu ve diğer kulaklıklardan önemli ölçüde daha az mobil olduğu görüşüne de yol açabilir. Kılıfın arkasında bir USB-C şarj portu bulunuyor. Bir LED şarj durumunu gösteriyor. Kulaklıklar dahil kılıf 187 gram (~6,6 oz) ağırlığındadır.

Sürdürülebilirlik, pahalı tercüman kulaklıklarının pazarlanmasında hiçbir rol oynamıyor; üretici, kullanılan malzemeler hakkında herhangi bir bilgi vermiyor.

Kulaklıklar şık bir siyah karton kutu içinde paketlenmiştir ve içinde yalıtım olarak sert bir köpük de kullanılmıştır.

Belirtildiği gibi, Timekettle uygulamasını kullanmak zorunludur ve ilk kez başlattığınızda bir hesap oluşturmanız gerekir. Ne yazık ki, uygulamayı mağazalarda bulamazsınız, bir QR kodu indirme sayfasına yönlendirir ve buna güvenmeniz gerekir. El cihazlarını eşleştirmek için, uygulama her yeniden başlatıldığında konumun da etkinleştirilmesi gerekir.

El cihazlarının yalnızca tek bir kullanım işlevi vardır: El cihazlarına dokunarak "Dinle ve Çal" modunda dinleme ve konuşma arasında geçiş yapabilirsiniz; bu da pratiktir, çünkü sesinizi tüm katılımcılara çevirmek için konferans masasının üzerinde duran akıllı telefonunuza uzanmanız gerekmez.

Bire Bir, Dinle ve Çal ve Medya Çevirisi olmak üzere üç çeviri moduna ek olarak, uygulamanın ana ekranında çevrimdışı mod da etkinleştirilebilir, ancak medya çevirisi daha sonra gri renkte gösterilir. Kulaklıkların durumu da en üstte görüntüleniyor. Geri bildirim doğrudan ana ekran üzerinden de gönderilebilir veya müşteri hizmetleriyle iletişime geçilebilir.

Alt kısımda da sekmeler var, "Keşfet" altında Timekettle ürünleri hakkında birkaç talimat var, W4 Pro söz konusu olduğunda sadece bir tane, yani akıllı telefonla nasıl eşleştirileceği. AI sekmesi kesinlikle heyecan verici. Burada terimleri yazabilir ve bunların çevrilmesini ve hatta yüksek sesle söylenmesini sağlayabilirsiniz. Geçmiş konuşmaların ve kayıtların notları da burada bulunabilir ve bunlar da özetlenebilir. Ayrıca kendi dil becerilerinizi de geliştirebilirsiniz, çünkü alıştırma dilinde konuşabileceğiniz bir yapay zeka modeli vardır, model daha sonra iyileştirme önerilerinde bulunur ve bir konuşmayı simüle etmek için sorular sorar. Çevirilerdeki 40 dilin aksine, AI bot sadece İngilizce, İspanyolca ve Çince dillerinde mevcut görünüyor.

W4 Pro'nun temel işi. Karşınızdaki kişiyle iki dilli bir konuşma yapmak istiyorsanız, şarj yuvasındaki iki kulaklıktan birini ona vermeniz, uygulamada iki dili ayarlamanız ve gitmeye hazır olmanız yeterli. Elbette birçok dil hakkında herhangi bir açıklama yapamayız, testte İngilizce ve Almanca'ya odaklandık.

Ancak burada bile kalite bir insan tercüman kadar iyi değildir. Cümlenin ortasında konuşmacının konuşmasındaki duraklamalar Timekettle sistemi için özel bir sorundur. Yapay zeka çevirmeni daha sonra cümlenin ortasına uygun olmayan bir son ekliyor. Eğer konuşmacı tekrar başlar ve cümleyi tamamlarsa, YZ çevirmeni yeni bir cümle başlatır. Bunun bazen söylenenlerin anlamını önemli ölçüde karıştırabileceğini tahmin etmek kolaydır.

Sistemin konuşmanın daha geniş bağlamını kavrayamadığı da dikkat çekiyor. Oğlumla test yapıyorum (o Alman, ben İngiliz) ve bana "Papa" diye hitap etmesine rağmen, yapay zeka konuşma sırasında ona "Du" ve sonra tekrar "Sie" diye hitap ettiğimi de yorumluyor. İş bağlamını göz önünde bulundurarak, en azından tutarlı bir şekilde "Sie" kelimesine bağlı kalın.

Diğer çevirilerin kalitesi de oldukça vasattır, bu da çoğu durumda bağlamın tanınmamasından kaynaklanmaktadır. "Meine" ve "Deine" gibi kulağa benzer gelen kelimeler sıklıkla karıştırılıyor, bu da söylenenin artık bir anlam ifade etmediği anlamına geliyor; bağlam tanıma bunu düzeltebilir. Bir başka örnek de daha az bilinen kelimelerin yanlış ve rastgele çevrilmesidir. Görünüşe göre yapay zeka, bir kelime alışverişinin moda olan slacklining sporu hakkında olduğunu bağlamdan çıkaramadı. "Flecklein", "Select Lining" kadar küçük bir spordur, ancak YZ bir dakika önce "Slackline "ı doğru bir şekilde tanımıştı, ancak bu kalıcı olmadı, bu yüzden ne yazık ki YZ konuşmanın gidişatından öğrenmiyor. Bağlamı tanımak, en azından her zaman yeni kelime yaratımlarına yol açmayacaktır.

Diğer kişinin kulağındaki çeviri sesi her zaman çok gecikmeli olduğundan ve çevirinin üzerinde konuşmak istemediğinizden, mümkün olan en iyi çeviriyi sağlamak için belirli konuşma kurallarına bağlı kalmalısınız. Bunlar arasında akıcı, ancak çok hızlı ve net olmayan, düşünmek için ara vermeden, ancak yaklaşık 2 cümleden sonra duraklayarak konuşmak, açık cümle yapıları ve mümkün olduğunca az konuşma dili yer alır. İş ortamında bile bazı davranış kurallarına uymak diğerlerine göre daha zordur.

Muhtemelen en çok yönlü mod. Burada çeşitli kaynakları dinliyorsunuz ve çeviriyi kulağınıza, transkripti ise cep telefonunuza alıyorsunuz. Toplantılarda kullanılmak üzere tanıtılmıştır, ancak radyo veya TV yayınları da bu şekilde çevrilebilir ve diğer durumlar da düşünülebilir. Rolleri tersine çevirmek ve kendiniz konuşmak istiyorsanız, tek yapmanız gereken sağ kulaklığa veya uygulamaya dokunmaktır; kendi cep telefonunuz diğer toplantı katılımcılarının söylediklerini tercüme edecektir.

Öte yandan, bu mod belki de hataya en yatkın moddur, çünkü sistem burada genellikle daha büyük, daha geniş bir bağlamda çalışmak zorundadır, bu nedenle birden fazla, değişen sesle, daha fazla arka plan gürültüsüyle ve daha uzaktaki hoparlörlerle başa çıkmak zorunda kalabilir. Timekettle'dan ayrıca Dinle ve Çal'daki Dinle kısmının, kulaklıklar yerine akıllı telefonun ses kaydından sorumlu olduğu tek mod olduğunu öğrendik. Bu nedenle tanıma büyük ölçüde modele bağlıdır.

Örneğin, dizüstü bilgisayar hoparlörlerimizden bir YouTube videosu oynattık. Ses seviyesi bizim için normalden yüksek olsa da, W4 Pro görünüşe göre yeterince iyi alamıyordu. Sadece sesi önemli ölçüde yükselttiğimizde kulaklıklar çeviri yapmak için motive olabildi. Ayrıca, akıllı telefon kaydında (Pixel 7 Pro) tanıma sorunu yaşandığı için çevirinin başlayıp cümlenin ortasında durması da her zaman oluyor. Masamda, arka plan gürültüsü olmadan oldukça yüksek bir YouTube videosu (dahili hoparlörler aracılığıyla %70 dizüstü bilgisayar sesi) olduğunu unutmayın. 100'de bile, çeviri genellikle devam etmiyor, bu da gerçekten ses seviyesinden kaynaklanamaz. Genel olarak, mod en azından oynatılan medyayı yakalarken oldukça güvenilmezdir.

Doğal sesleri yakalamak, en azından arka plan gürültüsü olmadan burada daha iyi çalışıyor. Bununla birlikte, çeviri kalitesi bazen arzulanan bir şey bırakıyor. Özellikle, konuşmacı bir cümle sırasında biraz duraklarsa, bu hızlı bir şekilde cümlenin sonu olarak yorumlanır ve konuşmacı yeniden başlar, bu da bazen orijinal olarak söylenenlerin anlamını bozar. Kendi adınıza konuşma gerçekten iyi çalışıyor gibi görünüyor, kendi söylediklerimiz sorunsuz bir şekilde çevrildi ve ara verirseniz, toplantı katılımcıları akıllı telefon hoparlörü aracılığıyla çevirileri dinleyebilir.

Medya Çevirisi, özellikle Timekettle uygulamasıyla aynı akıllı telefonda çalışan uygulamalardan çeviri yapmakla ilgilidir.

Timekettle uygulamasında bu modu etkinleştirir ve aynı anda YouTube'u (veya Zoom'u vb.) açarsak, örneğin, bir videodaki seslerin çevrilmesini sağlayabiliriz ve söylenenler de yazıya dökülür ve istenirse orijinal dilde ve çeviride veya yalnızca çeviri olarak veya hiç görüntülenmez. Buraya kadar her şey yolunda. Çeviriler de oldukça iyi ve hızlı çalışıyor çünkü uygulama ses kaydını doğrudan akıllı telefondan yakalayabiliyor. Transkripsiyonları içeren kaplama penceresi küçültülebilir veya büyütülebilir ve ayrıca serbestçe hareket ettirilebilir veya kapatılabilir - çok iyi.

Ancak, burada da bir veya daha fazla küçük sorun var.

1. Akıllı telefondaki tüm uygulamalar için tek bir ses düğmesi olduğundan, ne yazık ki sessizleşmeyen orijinalin sesi ile çevirinin sesi çakışıyor, bu da özellikle çeviri kanalına konsantre olmayı ve dinlemeyi çok zorlaştırıyor. Burada, orijinal YouTube videosu otomatik olarak daha sessiz hale gelmelidir.
2. Timekettle çevirinin büyük ölçüde gecikmesiz olduğunu iddia ediyor. Ancak bu en iyi ihtimalle transkripsiyon için geçerli, ses için değil. Çeviri sesi yalnızca birkaç transkript satırı sonra başlıyor. Bu da sesin transkripsiyonla örtüşmediği anlamına geliyor ki bu da birlikte okumayı zorlaştırıyor. Ancak daha da kötüsü, çeviri sesin orijinal video ile eşleşmemesi. Örneğin, sevgili Alex'imiz videoda belirli bir dizüstü bilgisayar modelinden bahsederken (İngilizce), Almanca çevirmenin sesi onun girişini çevirmeye yeni başlıyor. Bu, videoyu takip etmeyi çok daha zor hale getiriyor. Spor maçı özetindeki golü sesli çeviride 7-10 saniye sonrasına kadar duymuyoruz.
3. Eğer bir videoyu durdurursak, (sesli) çeviri de yaklaşık 2 saniye sonra duruyor. Bu elbette mantıklı, ancak orijinal ve sesli çeviri arasındaki uzun gecikmeyle birlikte, bu, bir videonun bitiminden sonra (yani videonun otomatik olarak durdurulması), artık belirli son bölümlerin sesli çevirisini alamayacağımız anlamına gelebilir. Bir video/ses durdurulur ve sonra devam ettirilirse, ses normal gecikmeden sonra yeniden başlar, ancak yalnızca yeni başlangıçtan itibaren; gecikme ve duraklama nedeniyle henüz sonuna kadar çevrilmemiş olan şey artık işitsel olarak çevrilmez, ancak yalnızca transkripsiyonda okunabilir.

Ancak genel olarak çeviri oldukça iyi çalışıyor, VLC oynatıcı veya ARD medya kütüphanesi ile radyo oyunları da dahil olmak üzere test edilen tüm uygulamalar tanındı. Bu çok pratik ve çeviri kalitesi etkileyici. Bununla birlikte, Timekettle'ın çeviri sesindeki uzun gecikme üzerinde hala çalışması gerekiyor.

Sonuçta, sanal paraların süresi dolmamalıdır, ancak onları daha sonra da çekemezsiniz.