DeepLabCut ile hareket yakalama derinlemesine uygulama

Anonim

Almanya ve ABD'de çeşitli kurumlarla bağlantılı bir araştırmacı ekibi, her tür hayvanın hareketini yakalamak için kullanılabilecek bir derin öğrenme algoritması geliştirdi. Nature Neuroscience dergisinde yayınlanan makalelerinde grup DeepLabCut adlı izleme aracını, nasıl çalıştığını ve nasıl kullanılacağını anlatıyor. Peking Üniversitesi ve Pennsylvania Üniversitesi ile yapılan Kunlin Wei ve Konrad Kording, aynı dergide, grubun yaptıkları işlerde sırasıyla bir News & Views parçası sunuyor.

Wei ve Kording'in de belirttiği gibi, bilim insanları bir yüzyıldan fazla bir süredir insanlara ve hayvanlara hareket yakalamayı uygulamaya çalışıyorlardı. Bu fikir, birlikte daha büyük, daha dikkat çekici bir hareket oluşturan tüm küçük hareketlerin inceliklerini yakalamaktır. tek dans adımı. Hayvanlarda bu tür hareketleri takip edebilmek, biyomekanikleri ve beyinlerinin nasıl çalıştığıyla ilgili bazı ipuçları sunar. İnsanlarla bunu yapabilmek, fiziksel terapi çabalarına veya spor performansındaki gelişmelere yardımcı olabilir. Mevcut süreç, konuyu video kaydetmeyi ve çerçeve ile görüntü çerçevelerini etiketlemenin zahmetli bir sürecini yürütmeyi içerir. Bu yeni çabada, araştırmacılar süreci gerçekleştirmek için daha hızlı ve daha kolay bir bilgisayar otomasyon tekniği geliştirdiler.

DeepLabCut'u yaratmak için grup, çok sayıda görüntü ve ilgili meta veri içeren Imagenet adlı bir veritabanından bilgi kullanarak bir sinir ağı kurdu. Daha sonra pozların tahminlerini optimize eden bir algoritma geliştirdiler. Üçüncü parça, algoritmayı çalıştıran, kullanıcılarla etkileşime giren ve sonuçların çıktılarını sunan bir yazılımdı. Sonuç, insanlar ve neredeyse tüm diğer yaratıklar üzerinde hareket yakalama gerçekleştirmek için kullanılabilecek bir araçtır. Kullanıcının yapması gereken şey, büyük parçaların etiketlendiği ve genel olarak nasıl hareket ettiğini gösteren bazı videoların olduğu bir örnek, bir sincabın resimleri. Ardından kullanıcı, ilgilenilen bir faaliyeti gerçekleştiren bir konunun videosunu yükler - söz gelimi, bir somunu açmaya yarayan bir sincap. Yazılım aktiviteyi hareket yakalama üreten dinlenme yapar.

Ekip, yeni aracı, hangi amaçla kullanırsa onu kullanmak isteyen herkesin erişimine açık hale getirdi. Wei ve Kording, aracın hareket yakalamada devrim yaratabileceğini ve profesyonellere ve acemilere kolayca ulaşabileceğini öne sürüyor.

menu
menu