Mitsubishi Electric açıklamasına göre, şirket parmağın tablet ya da telefon ekranındaki hareketlerini izleyerek konuşulan sözcükleri ekrana yansıtan dünyanın ilk ses aktivasyonlu çizim fonksiyonu SwipeTalk Air’i geliştirdi. Ekranda konumlandırılan metni anında bir yabancı dile çevirebilen ve çevrilen dilde yüksek sesle okunmasını sağlayan SwipeTalk Air, farklı dilleri konuşan kişiler arasındaki iletişimi kolaylaştırmak amacıyla canlı video kayıtlarında söylenenleri anında üç boyutlu metne dönüştürmek için dünyada ilk kez arttırılmış gerçeklik (AR-Augmented Reality) teknolojisinin kullanıldığı özel bir uygulama olarak öne çıkıyor.
EKRANDA KONUMLANDIRILAN METİN ANINDA YABANCI DİLE ÇEVRİLEBİLİYOR
SwipeTalk Air teknolojisinde, kullanıcı sesli olarak ana dilinde konuşup parmağını cihaz ekranında dolaştırdığında metin söylenilen dilde ekranda konumlandırılıyor. Bu metin anında bir yabancı dile çevrilebiliyor ve çevrilen dilde yüksek sesle okunabiliyor. Konuşan kişi parmağına “AR marker” (Artırılmış Gerçeklik İşaretleyicisi) adı verilen kamerada tespit edilebilir özel imgeler taktığında metin kişinin parmağının çizdiği rotayı takip ediyor. Metnin etkisini arttırmak ve anlaşılmasını kolaylaştırmak için ok, desen veya karikatür tarzı illüstrasyonlar çizilerek videoya eklenebiliyor.
SÖYLENENLERİ EKRANDA ÇİZİLEN ROTAYA 3D METİN OLARAK YERLEŞTİRİYOR
Açıklamaya göre, görüntüleri kameraya alan kişinin parmağını cihaz ekranında dolaştırmasıyla birlikte kullanıcı arayüzü söylenenleri anında videoya 3D metin olarak yansıtıyor. Cihazın kamera özelliği açık konumdayken birkaç kelime söylendiğinde ve ekrana bir çizgi çizildiğinde metin anında çizilen alanda beliriyor. Video kayıt ve düzenleme özelliklerinin kusursuz entegrasyonu sayesinde anı canlı olarak aktarma deneyimi kesintiye uğramıyor. Hızlı metin konumlama özelliğiyle ise kullanıcılar hazırladıkları videolarla yaratıcılıklarını sergileyebiliyor.
Mitsubishi Electric, sosyal medyaya dinamizm katması beklenen ekstra etkili videolar için kullanıcı arayüzü, video kayıt ve diğer özellikleri içeren SwipeTalk Air uygulamasını iOS üzerinde geliştiriyor.
Prototipi mart ayında Texas’ta düzenlenen SXSW (South by Southwest) Dijital Teknoloji Fuarı’nda kullanıcılarla buluşan SwipeTalk Air teknolojisinin ticari ürün ve hizmetlerde lansmanı gerçekleştirilmeden önce operasyon kabiliyeti ve fonksiyonlar açısından ilave iyileştirmeler yapılması planlanıyor.