Нейромережу навчили визначати жанр книги за її обкладинкою

book-stackЯпонські вчені з Університету Кюсю створили нейромережу, яка визначає жанр книги за її обкладинкою. Про це пише Apparat.

Щоб навчити нейромережу, вчені завантажили в неї 137 788 унікальних обкладинок книг із Amazon, які класифіковані на 20 різних жанрів. Для кожної книги дослідники вказали лише один жанр. За час випробувань алгоритм навчився правильно визначати жанр в 21,9% випадках. «Це показує, що класифікація книг, яка ґрунтується на дизайні обкладинки, можлива, хоча це дуже складне завдання», — кажуть вчені.

Деякі жанри розпізнати простіше, ніж інші. Нейромережа порівняно легко розпізнає книги про туризм і комп’ютерні технології, оскільки дизайнери використовують типові зображення для книжок цих жанрів. Дуже легко програма розпізнає кулінарні книги, якщо на обкладинці зображено їжу, проте труднощі виникають, коли замість цього на обкладинці портрет шеф-кухаря.

Біографії та мемуари алгоритм часто зараховує до жанру історичної літератури, плутає дитячі книжки з коміксами і графічними романами, майже не відрізняє медичну від іншої наукової літератури.

Істотний недолік дослідження в тому, що вчені не порівняли результати роботи нейромережі з результатами людини. Зокрема, корисно було б дізнатися, чи точно визначать жанр книги за обкладинкою користувачі платформи Mechanical Turk на Amazon.

Apparat