ChatGPT ve Co., günlük hayattan her türlü soruya yanıt verir ve hatta esprili yanıtlarla yardım edebilir. Bununla birlikte, kullanıcının – elbette – zaman zaman akıllı telefonuna veya bilgisayarına bakması gerekir – ve bu kendini ele verir.
Duyuru
Nisan ayı sonlarında Stanford Üniversitesi öğrencileri, mikrofon görüşmelerini izleyen, bunları metne dönüştüren ve ChatGPT yanıtlarını kullanıcının görüş alanındaki gözlüklerde görüntüleyen bir sistem olan RizzGPT’yi, tüm durumlar için bir tür gerçek zamanlı bilgi istemi olarak gösterdiler. Ancak Bryan Hau-Ping Chiang ve arkadaşları, o sırada uygulamayı yayınlamadı.
Chiang ve ekibinin akıllı hack için kullandığı AR Monocle donanımının üreticisi Brilliant Labs şimdi yetişiyor. arGPT iOS uygulaması artık cihazınız için kullanılabilir. Brilliant Labs, uygulamayı kısa bir YouTube klibinde çalışırken gösterir.
Önerilen editoryal içerik
İzninizle, buraya harici bir YouTube videosu (Google Ireland Limited) yüklenecek.
Her zaman YouTube videoları yükleyin
YouTube videosunu şimdi yükleyin
arGPT uygulamasının gösterimi
AR lens bileşenleri
Monocle, bir mikrofon, kamera, FPGA hızlandırıcı yongaları ve kullanıcının görüş alanındaki bilgileri kaplayan bir mikro ekran barındıran bir gözlük takma merceğinden oluşur. Tamamen açık kaynaklı geliştirici kiti, Şubat 2023’ten bu yana 349 ABD Doları karşılığında edinilebilir. Başlangıçtaki yatırımcılar arasında Oculus’un kurucu ortağı Brendan Iribe, Siri’nin kurucu ortağı Adam Cheyer ve Pebble’ın kurucusu Eric Migicovsky yer alıyor.
“Monocle” adı verilen AR donanımı, gözlük takmak için bir bağlantı merceğinden oluşur. (Resim: Brilliant Labs)
Brillant Labs CEO’su Bobak Tavangar, MIT Technology Review ile yaptığı bir röportajda, arGPT uygulamasının prensip olarak RizzGPT ile aynı şekilde çalıştığını doğruladı: Monocle, işlenen ses sinyalini mikrofondan akıllı telefona iletir ve bu da sinyalleri konuşmaya iletir. OpenAI’den Whisper’ı işlemek için model sunar. Whisper transkripti de ChatGPT’ye girdi görevi görür. Çıktısı, kullanıcının görüş alanında, kolayca gözlüğe takılabilen AR ekranı aracılığıyla görüntülenir. Tavangar’a göre bu, “bir veya iki saniyelik bir gecikmeyle” çalışıyor. Asıl zorluk, iOS’un “akıllı telefon cebinizdeyken bile ses sinyalini güvenilir bir şekilde işlemesini sağlamaktı. Bu önemsiz değildi.”
Duyuru
Tek gözlük içine yerleştirilmiş kamera kullanılmaz. Tavangar’ın belirttiği gibi henüz değil, çünkü şirketin hedefi “üretken yapay zekanın bizim işittiğimizi ve gördüğümüzü görmesini ve duymasını sağlamak”. Bu, “basit yüz tanıma” veya hareket kontrolü için kullanılabilir. OpenAI’nin GPT-4’ü de görüntüleri işleyebilir, ancak bu özellik henüz API aracılığıyla mevcut değildir. Ancak 2024 gibi erken bir tarihte başlayabilir. “Başlangıç bloklarındayız ve mümkün olan en kısa sürede başlayacağız” diyor.
Gerçeğe yabancılaşmış görüntü
Bu arada Brilliant Labs, uygulamasına bir tür elektronik halüsinasyon işlevi eklemek istiyor: kamera görüntüsü, gelen görüntüyü kullanıcının talimatlarına göre yabancılaştıran ve ardından yabancılaştırılmış görüntüyü üst üste bindiren Dall-E gibi görüntü üreten bir yapay zekaya gitmeli. görüntü görüş alanındaki görüntü çözülür.
Brilliant Labs, 30 yıldan daha eski bir teknolojik rüya üzerinde çalışıyor: 1990’ların ortalarında, MIT Media Lab’de kendilerine ironik bir şekilde cyborg adını veren bir grup genç araştırmacı, onlara “bağlam” sağlayan giyilebilir bilgisayarlar üzerinde deneyler yapıyorlardı. bilgiye “bağımlı” erişim – konuştukları insanların isimleri gibi (hareketin öncülerinden biri olan Thad Starner, yüzler ve isimler konusunda korkunç bir hafızası olduğunu söylüyor).
Bununla birlikte, geçmişte yüz tanıma ile eşleştirilebilen el kameraları, popülasyonda şiddetli savunma reflekslerine yol açmıştır. Google Glass’ın başarısızlığı bunun açık bir işaretidir. Ancak Tavangar, şirketinin amacının ilgili AI modellerini bulmak olduğuna dikkat çekiyor. Örneğin, gözlükler Avrupa’da kullanılıyorsa, yalnızca “ilgili yerel düzenlemelere uyan” modellere bağlantı yapılmasına izin verilmelidir. Avrupa Yapay Zeka Yasası Parlamentoda oylandığı şekliyle kabul edilirse, gerçek zamanlı yüz tanıma AB’de yasaklanacak.
(wst)
Haberin Sonu
Duyuru
Nisan ayı sonlarında Stanford Üniversitesi öğrencileri, mikrofon görüşmelerini izleyen, bunları metne dönüştüren ve ChatGPT yanıtlarını kullanıcının görüş alanındaki gözlüklerde görüntüleyen bir sistem olan RizzGPT’yi, tüm durumlar için bir tür gerçek zamanlı bilgi istemi olarak gösterdiler. Ancak Bryan Hau-Ping Chiang ve arkadaşları, o sırada uygulamayı yayınlamadı.
Chiang ve ekibinin akıllı hack için kullandığı AR Monocle donanımının üreticisi Brilliant Labs şimdi yetişiyor. arGPT iOS uygulaması artık cihazınız için kullanılabilir. Brilliant Labs, uygulamayı kısa bir YouTube klibinde çalışırken gösterir.
Önerilen editoryal içerik
İzninizle, buraya harici bir YouTube videosu (Google Ireland Limited) yüklenecek.
Her zaman YouTube videoları yükleyin
YouTube videosunu şimdi yükleyin
arGPT uygulamasının gösterimi
AR lens bileşenleri
Monocle, bir mikrofon, kamera, FPGA hızlandırıcı yongaları ve kullanıcının görüş alanındaki bilgileri kaplayan bir mikro ekran barındıran bir gözlük takma merceğinden oluşur. Tamamen açık kaynaklı geliştirici kiti, Şubat 2023’ten bu yana 349 ABD Doları karşılığında edinilebilir. Başlangıçtaki yatırımcılar arasında Oculus’un kurucu ortağı Brendan Iribe, Siri’nin kurucu ortağı Adam Cheyer ve Pebble’ın kurucusu Eric Migicovsky yer alıyor.
“Monocle” adı verilen AR donanımı, gözlük takmak için bir bağlantı merceğinden oluşur. (Resim: Brilliant Labs)
Brillant Labs CEO’su Bobak Tavangar, MIT Technology Review ile yaptığı bir röportajda, arGPT uygulamasının prensip olarak RizzGPT ile aynı şekilde çalıştığını doğruladı: Monocle, işlenen ses sinyalini mikrofondan akıllı telefona iletir ve bu da sinyalleri konuşmaya iletir. OpenAI’den Whisper’ı işlemek için model sunar. Whisper transkripti de ChatGPT’ye girdi görevi görür. Çıktısı, kullanıcının görüş alanında, kolayca gözlüğe takılabilen AR ekranı aracılığıyla görüntülenir. Tavangar’a göre bu, “bir veya iki saniyelik bir gecikmeyle” çalışıyor. Asıl zorluk, iOS’un “akıllı telefon cebinizdeyken bile ses sinyalini güvenilir bir şekilde işlemesini sağlamaktı. Bu önemsiz değildi.”
Duyuru
Tek gözlük içine yerleştirilmiş kamera kullanılmaz. Tavangar’ın belirttiği gibi henüz değil, çünkü şirketin hedefi “üretken yapay zekanın bizim işittiğimizi ve gördüğümüzü görmesini ve duymasını sağlamak”. Bu, “basit yüz tanıma” veya hareket kontrolü için kullanılabilir. OpenAI’nin GPT-4’ü de görüntüleri işleyebilir, ancak bu özellik henüz API aracılığıyla mevcut değildir. Ancak 2024 gibi erken bir tarihte başlayabilir. “Başlangıç bloklarındayız ve mümkün olan en kısa sürede başlayacağız” diyor.
Gerçeğe yabancılaşmış görüntü
Bu arada Brilliant Labs, uygulamasına bir tür elektronik halüsinasyon işlevi eklemek istiyor: kamera görüntüsü, gelen görüntüyü kullanıcının talimatlarına göre yabancılaştıran ve ardından yabancılaştırılmış görüntüyü üst üste bindiren Dall-E gibi görüntü üreten bir yapay zekaya gitmeli. görüntü görüş alanındaki görüntü çözülür.
Brilliant Labs, 30 yıldan daha eski bir teknolojik rüya üzerinde çalışıyor: 1990’ların ortalarında, MIT Media Lab’de kendilerine ironik bir şekilde cyborg adını veren bir grup genç araştırmacı, onlara “bağlam” sağlayan giyilebilir bilgisayarlar üzerinde deneyler yapıyorlardı. bilgiye “bağımlı” erişim – konuştukları insanların isimleri gibi (hareketin öncülerinden biri olan Thad Starner, yüzler ve isimler konusunda korkunç bir hafızası olduğunu söylüyor).
Bununla birlikte, geçmişte yüz tanıma ile eşleştirilebilen el kameraları, popülasyonda şiddetli savunma reflekslerine yol açmıştır. Google Glass’ın başarısızlığı bunun açık bir işaretidir. Ancak Tavangar, şirketinin amacının ilgili AI modellerini bulmak olduğuna dikkat çekiyor. Örneğin, gözlükler Avrupa’da kullanılıyorsa, yalnızca “ilgili yerel düzenlemelere uyan” modellere bağlantı yapılmasına izin verilmelidir. Avrupa Yapay Zeka Yasası Parlamentoda oylandığı şekliyle kabul edilirse, gerçek zamanlı yüz tanıma AB’de yasaklanacak.
(wst)
Haberin Sonu