(Кредит: Дрю Вебер / Лабораторія орнітології Корнелла)
Мобільний додаток Merlin Bird Photo ID може ідентифікувати сотні видів Північної Америки, які він «бачить» на фотографіях, завдяки технології машинного навчання.
Завантаживши програму на мобільний пристрій, програма може переходити куди завгодно, навіть у місцях, де немає мобільної служби або Wi-Fi.
"Коли ви відкриваєте додаток Merlin Bird Photo ID, вас запитують, чи хочете ви сфотографуватись за допомогою смартфона або витягнути зображення з цифрової камери", - говорить керівник проекту Merlin Джессі Баррі з лабораторії орнітології в Корнелі. "Ви збільшуєте птаха, підтверджуєте дату та місце, і Мерлін покаже вам найкращі варіанти поєднання з 650 відомих йому північноамериканських видів".
Крила, дзьоби та кігті
Комп'ютерні вчені Caltech та Cornell Tech навчили Мерліна розпізнавати птахів, показуючи йому майже 1 мільйон фотографій, які були зібрані та анотовані птахами та волонтерами, мобілізованими лабораторією Корнелл. Анотації включають види птахів, а також ключові моменти, що ідентифікують фізичні елементи, такі як крила, дзьоби та кігті.
Коли користувач програми дарує йому птаха для ідентифікації, Мерлін відбирає види, які точно відповідають цим характеристикам. Як і будь-який хороший птахівник, система розглядає види, які можна було б знайти в цей конкретний час року та в цьому місці, використовуючи інформацію від eBird, Інтернет-ресурсу для птахів, який збирає та реєструє в середньому 7 мільйонів записів спостережень за птахами щомісяця з усього світу .
«Створюючи посвідчення особи Merlin Bird Photo, ми особливо турбувались якістю та організацією даних, - говорить Серж Белонгі, професор інформатики в Cornell Tech. Разом з П'єтро Пероною з Каліфорнійського технологічного інституту (Калтех) він є співзасновником Visipedia, фінансуваного Google парасолькового проекту, який використовує досягнення машинного навчання та комп'ютерного зору для класифікації об'єктів на фотографіях.
"Зрештою, ми хочемо створити відкриту платформу, яку будь-яка спільнота може використовувати для створення візуального інструменту класифікації метеликів, жаб, рослин або всього, що їм потрібно", - говорить Белонгі.
"Цей додаток є кульмінацією семи років наполегливої роботи наших студентів. Він рухається величезним прогресом, досягнутим вченими з питань комп'ютерного зору та машинного навчання у всьому світі", - говорить Перона, професор електротехніки з Інженерного відділу Калтех та прикладної науки. "Машина, яка розпізнає предмети на зображеннях, як це роблять люди, була далекою мрією, коли я був аспірантом, і зараз це нарешті відбувається".
Хороші образи, гарні збіги
Наскільки хороший посвідчення особи з фотографією птиці Merlin? “Точність становить близько 90 відсотків, якщо фотографія користувача хорошої якості. Надайте нечітке зображення або зображення, на якому птах невеликий або частково покритий листям, і шанси отримати точний збіг падають ”, - говорить Стів Бренсон, старший докторант з електротехніки в Caltech.
Незважаючи на високі технологічні досягнення, люди все ще є важливою частиною процесу. "Нам потрібні дані eBird від спостерігачів за птахами, а також експерти, які можуть позначити фотографії, що використовуються для навчання Мерліна", - говорить аспірант Caltech Грант Ван Горн. “Вам потрібні вчителі, щоб навчити машину тому, що їй потрібно робити. Наша система поєднує в собі досвід сотень птахів і орнітологів ". Ван Хорн і Бренсон є частиною команди Visipedia і розробили алгоритми, які дозволяють Мерлін навчитися розпізнавати птахів.
Глобальне покриття в майбутньому
Неподалік є випуск посвідчення особи з фотографіями птахів Merlin іспанською мовою для птахів у Мексиці. Потім команда Merlin випустить версії для Південної Америки, Європи, Азії, Африки та Австралії - з часом розшириться, щоб охопити земну кулю.
«Чудова річ цього проекту - це співпраця з командою Visipedia, - каже Баррі. "У нас є продукт, який справді працює, тому що він підтримується фантастичними дослідженнями і чудово підходить для птахів, оскільки створений для птахів".
Оновлений Merlin Bird Photo ID є безкоштовним для iOS або Android систем від Apple iTunes та в Google Play магазини додатків. Це пара з оригінальною програмою Merlin, випущеною в 2014 році, яка використовує кілька коротких запитань, щоб допомогти користувачам звузити особу нового птаха.
Merlin Bird Photo ID забезпечується Visipedia за підтримки Google, Інституту Джейкобса Техніона-Корнелла та Національного наукового фонду.
джерело: Caltech
Схожі книги:
at InnerSelf Market і Amazon
