Bu kamera mikrofon olmadan ses kaydı yapabiliyor: Ses titreşimlerini görüyor

RAM

New member
Carnegie Mellon Üniversitesi araştırmacıları tarafınca geliştirilen kamera sistemi, ses titreşimlerini o kadar hassas ve ayrıntılı bir biçimde algılayabiliyor ki bir orkestra yahut kümede tek bir enstrümanın müziğini bir daha oluşturabiliyor.

Düşük maliyetli

Sistem iki kamera ve bir lazerden oluşuyor. Araştırmacılar, oluşturdukları sistemin insan gözünün goremediği, yüksek süratli ve düşük genlikli yüzey titreşimlerini algılayabildiğini belirtiyor. Sistemde evvelki araştırmalarda kullanılan yüksek süratli kameralar yerine daha uygun fiyatlı kameralar tercih edilmiş. CMU Robotik Enstitüsü profesörü, optik mikrofonu epey daha pratik ve kullanılabilir hale getirdiklerini, bunu da düşük maliyetle başardıklarını söylüyor.

Kamera sistemi nasıl çalışıyor?

Algoritma, rolling shutter ve global shutter ile yakalanan nokta desenleri karşılaştırıyor. Desenler içindeki farkları kullanarak titreşimleri hesaplıyor ve sesi bir daha oluşturuyor. Muhtemelen lazer ile oluşturulan nokta desen, sert bir yüzeye yansıdıktan daha sonra alandaki uygun ışığın hareketini söz ediyor. Bu hareket yüzey titreştikçe değişiyor. Sarmal deklanşör manzarayı bir uçtan öbür uca süratle tararken, küresel deklanşör birebir anda tüm manzarayı yakalıyor.


Ödül aldı

Bilgisayarlı görü
konusunda önde gelen konferanslardan CVPR’de ödül alan sisteme ait araştırmada yer alan isimlerden O’Toole, bu sistemin bilgisayarlı görü ile yapılabileceklerin sonlarını zorladığını belirtiyor.

Nerelerde kullanılabilir?

Bilgisayarlı görü alanındaki birçok çalışma, alandaki objeleri tanımak yahut takip etmek için eğitim sistemlerine odaklanıyor. Bu çalışma sistemlerin algılanamayan, yüksek frekanslı titreşimleri daha güzel görmesini sağlaması açısından bilgisayarlı görü için yeni uygulamaların yolunu açıyor.

Ekibin çift deklanşörlü optik titreşim algılama sistemi, ses mühendislerinin düzenleme etabında istedikleri enstrümana odaklanmalarını kolaylaştıracak. Yahut üreticiler, bu sistemle fabrikadaki makinelerden gelen titreşimleri izleyerek sorunu daha rahat tespit edebilecek. Bu değişen teknolojinin uygulanabileceği biroldukca alan var.