Carnegie Mellon Üniversitesi araştırmacıları tarafından geliştirilen kamera sistemi, ses titreşimlerini o kadar hassas ve ayrıntılı bir biçimde algılayabiliyor ki bir orkestra yahut kümede tek bir enstrümanın müziğini yine oluşturabiliyor.
Düşük maliyetli
Sistem iki kamera ve bir lazerden oluşuyor. Araştırmacılar, oluşturdukları sistemin insan gözünün göremediği, yüksek süratli ve düşük genlikli yüzey titreşimlerini algılayabildiğini belirtiyor. Sistemde evvelki araştırmalarda kullanılan yüksek süratli kameralar yerine daha uygun fiyatlı kameralar tercih edilmiş. CMU Robotik Enstitüsü profesörü, optik mikrofonu çok daha pratik ve kullanılabilir hale getirdiklerini, bunu da düşük maliyetle başardıklarını söylüyor.
Kamera sistemi nasıl çalışıyor?
Algoritma, rolling shutter ve global shutter ile yakalanan nokta desenleri karşılaştırıyor. Desenler ortasındaki farkları kullanarak titreşimleri hesaplıyor ve sesi yine oluşturuyor. Muhtemelen lazer ile oluşturulan nokta desen, sert bir yüzeye yansıdıktan sonra alandaki uygun ışığın hareketini tabir ediyor. Bu hareket yüzey titreştikçe değişiyor. Sarmal deklanşör imgeyi bir uçtan öteki uca süratle tararken, küresel deklanşör tıpkı anda tüm imgeyi yakalıyor.
Ödül aldı
Bilgisayarlı görü konusunda önde gelen konferanslardan CVPR’de ödül alan sisteme ait araştırmada yer alan isimlerden O’Toole, bu sistemin bilgisayarlı görü ile yapılabileceklerin hudutlarını zorladığını belirtiyor.
Nerelerde kullanılabilir?
Bilgisayarlı görü alanındaki birden fazla çalışma, alandaki objeleri tanımak yahut takip etmek için eğitim sistemlerine odaklanıyor. Bu çalışma sistemlerin algılanamayan, yüksek frekanslı titreşimleri daha uygun görmesini sağlaması açısından bilgisayarlı görü için yeni uygulamaların yolunu açıyor.
Ekibin çift deklanşörlü optik titreşim algılama sistemi, ses mühendislerinin düzenleme basamağında istedikleri enstrümana odaklanmalarını kolaylaştıracak. Yahut üreticiler, bu sistemle fabrikadaki makinelerden gelen titreşimleri izleyerek sorunu daha rahat tespit edebilecek. Bu teknolojinin uygulanabileceği birçok alan var.