Четырёхрукий робот-музыкант Шимон (Shimon), который был представлен миру в 2017 году, научился петь, двигаться под музыку, писать тексты и сочинять собственные мелодии. И в скором времени он отправиться на гастроли со своим первым музыкальным альбомом.

Три года назад Шимон пробовал себя на ударном музыкальном инструменте — маримбе. Он импровизировал, сочинял простые мелодии и учился управлять своими руками. Шимон учится своему ремеслу так же, как и другие роботы, получая и анализируя большое количество данных. Учёные дали освоить роботу около 50 тысяч текстов песен в различных стилях: джаз, прогрессивный рок и хип-хоп. Благодаря такой базе и правилам, которые он выучил робот Шимон научился сам сочинять тексты для своих будущих композиций. При этом, как отмечают разработчики робота, он знает, что делает музыку привлекательной для слушателей.

Чтобы рифмы и ритм, которые так важны в песнях, были на высоте, команда инженеров тренирует Шимона с помощью метода под названием глубокое обучение. Его специалисты сочетают с обучением семантическим знаниям. Иными словами, люди учат робота понимать смысл слов и словосочетаний. Процесс создания композиции начинает разработчик Шимона профессор Гил Вайнберг (Gil Weinberg) из Технологического института Джорджии. Он задаёт роботу тему, а тот пишет по ней текст для песни.

Полученные тексты хоть и состоят из слов и фраз, которые звучат как предложения, на самом деле имеют мало смысла. С другой стороны, немало современных композиций представляют собой ни что иное, как красиво звучащий набор слов, так что Шимон вполне вписывается в современные тренды.

Помимо текстов песен, робот может сочинить и мелодию под свои стихи, но по большей части их пишет увлечённый профессор Вайнберг.

Команда инженеров из Университета имени Помпеу Фабра в Испании разработала для Шимона уникальный голос. Для этого они использовали собственные алгоритмы машинного обучения и сотни существующих песен. Создатели также позаботились о том, чтобы Шимон выглядел более реалистично благодаря двигающимся голове, бровям и рту, который открывается в такт пению. Головой робот может качать под музыку, наклоняться к маримбе и оглядываться на своих товарищей по группе.

В ближайшие несколько месяцев робот-музыкант Шимон и его команда собираются выпустить альбом Shimon Sings, состоящий из восьми-десяти песен. Сообщается, что весной его можно будет прослушать на интернет-сервисе потокового аудио Spotify. Помимо этого необычный музыкальный коллектив планирует отправиться на гастроли.

Фото превью и материала / Shimon