Тёмный

SheetSage: ИИ сам переводит музыку в ноты и MIDI 

Эльнур Рахматуллин | Искусство и технологии
Просмотров 30 тыс.
50% 1

Sheetsage: github.com/chrisdonahue/sheet...
Публикация: arxiv.org/abs/2212.01884

Наука

Опубликовано:

 

6 дек 2022

Поделиться:

Ссылка:

Скачать:

Готовим ссылку...

Добавить в:

Мой плейлист
Посмотреть позже
Комментарии : 110   
@Oblomovblues
@Oblomovblues Год назад
Ютуб засранец вооюще не выдает твоих видео в рекомендациях. столько интересного пропустил! Спасибо друг. поставил колокольчик для опевещений.
@Musicchannel-wp2je
@Musicchannel-wp2je Месяц назад
Вот это круть, действительно стоит скачать
@user-qn4zy7wz6j
@user-qn4zy7wz6j Год назад
Эльнур, восхищён вашим контентом! подскажите пожалуйста, способен ли ИИ из изображения на котором теннисист бьёт по мячу поменять стиль изображения не трогая самого спортсмена и мяч?( используя например "midjourney")
@dasdas221_
@dasdas221_ Год назад
Почитай Stable Diffusion, расширение controlnet. Кто ищет - тот найдёт.
@user-py2qt7rb5j
@user-py2qt7rb5j Год назад
Очень круто
@AlexMost57
@AlexMost57 7 месяцев назад
Программу, возможно, установить на Windows 10? Помогите, если знаете как? Очень нужно, срочно. Спасибо! С меня подписка.
@marat_abramian
@marat_abramian День назад
Мы все этого боялись
@izotoperx
@izotoperx 4 месяца назад
Подскажите, где можно скачать этй программу на мак?
@user-py2qt7rb5j
@user-py2qt7rb5j Год назад
О, новое видео ура
@aruzhan6694
@aruzhan6694 2 месяца назад
Интересно подойдут ли эти ноты для 2 струнных инструментов типо домбры…
@alkraa1
@alkraa1 Год назад
Круто!
@uganda0340
@uganda0340 11 месяцев назад
а на кали Линукс она заработает? А то все пытался и пытался, но так и не смог ее установить
@user-yi2ln4np4c
@user-yi2ln4np4c 6 месяцев назад
Я пою телефон записывает ноты.Есть такое приложение.?
@zuowa
@zuowa Год назад
Я к сожалению не помню название, но в году 2007-2008 я использовал прогу для перевода mp3 в midi, и тогда уже это не было чем то удивительным. Я тестил на треке из начальной заставки GTA S.A. результат был вполне неплохим. Ремикс долго висел в топе на realmusic)
@tirannozavr2093
@tirannozavr2093 4 месяца назад
WIDI.Recognition.System.Professional. Но там тоже кривовато на выходе
@qwertyqee6687
@qwertyqee6687 3 месяца назад
Есть программа или какой то способ,что бы ноты писались в цифрах,что бы я смог сыграть на телефоне
@antonshtefan1547
@antonshtefan1547 10 месяцев назад
На винду не поставить?
@GUITARKOS
@GUITARKOS 9 месяцев назад
как перевести в табулатуру?
@anitabundina6642
@anitabundina6642 28 дней назад
Подскажите, на мак устанавливается она? Совсем не могу понять их сайт:((
@Yuriy501
@Yuriy501 3 месяца назад
И где там кнопка Скачать? Где программу можно скачать?
@Bretton5863
@Bretton5863 2 месяца назад
🔥
@alkraa1
@alkraa1 Год назад
А как зделать так чтобы вместо название аккорла был нота
@Alexe7438
@Alexe7438 28 дней назад
Есть такая програма если видишь ноты но не знаешь на какие клавиши их нажимать и что бы она показала?
@user-lu4xo6nd8h
@user-lu4xo6nd8h 7 месяцев назад
DAW Cubase 12 это делает намного лучше и корректнее, спасибо за ваш обзор, ещё один момент в общую копилку
@darkage8967
@darkage8967 6 месяцев назад
как именно ? куда заходить?
@user-lu4xo6nd8h
@user-lu4xo6nd8h 6 месяцев назад
​@@darkage8967закидывает трек референс создаёте аккордовый трек и перетягивает референс на этот аккордовый трек и вауля. Можно потом перевести этот трек в миди и экспортировать в нотный редактор
@user-xj6pi8ml7g
@user-xj6pi8ml7g 6 месяцев назад
Тоже интересно
@user-mg2dz9ud9u
@user-mg2dz9ud9u 6 месяцев назад
Тоже самое
@robertandrew1494
@robertandrew1494 6 месяцев назад
@@darkage8967 вариаудио
@e-orchestral_
@e-orchestral_ 4 месяца назад
Согласна с вами. Оно нас заменит. Пока только ИИ не дают авторские права. Но это пока. И когда это произойдет,то нам конец.
@Declan29483
@Declan29483 Год назад
Офигеть
@yuriyi1
@yuriyi1 3 месяца назад
Как помощник пойдёт.
@janinasakharnykh1278
@janinasakharnykh1278 6 месяцев назад
Можно ли использовать эти миди где-нибудь? Как обстоят дела с копирайтом? Это чья музыка тогда получается?
@MS-qx1to
@MS-qx1to 3 месяца назад
Ну вы же понимаете, что это ноты существующего произведения?
@user-um9we6qh7d
@user-um9we6qh7d 29 дней назад
А онлайн есть?
@romzi8710
@romzi8710 Месяц назад
Вообще не разобрался как с этой штукой работать(( нужна помощь
@airmail9937
@airmail9937 Год назад
Сделай туториал пожалуйста как установить?
@SAFO-MAN
@SAFO-MAN 7 месяцев назад
поддерживаю!!❤😂
@dinarasadieva1201
@dinarasadieva1201 8 месяцев назад
как поставить на винду? очень нужно
@vladeksss
@vladeksss 4 месяца назад
интересно тоже
@Andrejr77rv
@Andrejr77rv 3 месяца назад
А можно ли вообще на Винду!? Тоже надо
@Evgenc4hik
@Evgenc4hik 3 месяца назад
Можно Linux на внешний ssd установить. С него и запускать программу. Если, конечно, разберëтесь как еë установить
@maximkabalskis1723
@maximkabalskis1723 2 месяца назад
Это пока что провал, мелодия начинается не с той доли и не совпадает с гармонией
@artem59k13
@artem59k13 4 дня назад
Доброго времени суток. По моему мнению AI музыкантов и художников не заменит, а станет вспомогательным решением для всех. Даже для художников. Они смогут обучать компьютерное зрение. Мне как странно бы не показалось в сообщении незрячему зрителю помогает компьютерное зрение в распознавании картинок и даже текста. Я вообще случайно наткнулся на этот ролик по запросу в Яндексе распознавание нот музыки с помощью AI. Благодарю автора за информацию.
@tischenkovitaliy
@tischenkovitaliy 2 месяца назад
меня больше удивляет не способности этой программы, а восторг автора видео.
@user-um9we6qh7d
@user-um9we6qh7d 29 дней назад
0:59 "Белые розы" это не попса, а нормальная ретро песня Попса это "Любовь красива" (любят крутить на "Юмор-ФМ"), "Чашка кофию".
@AlexisLionel
@AlexisLionel 29 дней назад
Согласен - неаккуратно слово подобрал в видео.
@user-jx4qb1pv2z
@user-jx4qb1pv2z 4 месяца назад
Как установить?
@VictorKoryakin
@VictorKoryakin 11 месяцев назад
А как она классику снимает? Например классическую гитару соло или фортепиано.
@AlexisLionel
@AlexisLionel 11 месяцев назад
Коряво - особенно, если модуляции ритмические или по тональности есть
@VictorKoryakin
@VictorKoryakin 11 месяцев назад
@@AlexisLionel ясно, спасибо за ответ. Я рад что технологии дошли и до музыкального текста, была бы еще прога нормальная сканирующая ноты в PDF формате или формате для разных редакторов. Те что есть корявые на столько что уж лучше вручную копировать.
@djbassyns
@djbassyns 7 месяцев назад
Ну а как же быть с остальными то инструментами?но Где бас шляпы и автоматизация ?
@user-uu2fz9it5k
@user-uu2fz9it5k 9 дней назад
вы большой мечтатель
@djbassyns
@djbassyns 9 дней назад
@@user-uu2fz9it5k yes ☺️
@mityadont
@mityadont 21 день назад
Эльнур, можно я вам скину простую мелодию, очень нужны ноты. Убунты нет.
@AlexisLionel
@AlexisLionel 21 день назад
К сожалению, уже снёс свою убунту с программой
@nazario4258
@nazario4258 4 месяца назад
Данная программа идет только на linux!
@ChinchillaYT
@ChinchillaYT 5 месяцев назад
Какая у тебя ОС?
@user-yr9qw3ei4c
@user-yr9qw3ei4c Месяц назад
*_Linux_*
@user-os4pj6fw4n
@user-os4pj6fw4n 5 месяцев назад
Здравствуйте! Вы сможете написать ноты с к фильма Соната? ru-vid.com/video/%D0%B2%D0%B8%D0%B4%D0%B5%D0%BE-kJWp8ylC6uw.htmlsi=oEfbGOuq1zFQsvFt
@edmar6149
@edmar6149 2 месяца назад
Здравствуйте, как можно с вами связаться ?
@user-xw5oz6nn4k
@user-xw5oz6nn4k 5 месяцев назад
прога на линуксе же
@AnnaTrubetskaya
@AnnaTrubetskaya 8 месяцев назад
Эльнур спасибо, Пока я так вижу, что Вы один научились ей пользоваться, можете зарабатывать на транскрибировании. У меня есть первый заказ) напишите мне
@vvwwvv
@vvwwvv Год назад
Заменил винду на бубунту?)
@AlexisLionel
@AlexisLionel Год назад
Не, убунта как запасная пока, я виндушник всё же.
@ayazbekrustamov-rz4rx
@ayazbekrustamov-rz4rx Год назад
@@AlexisLionel где взять этот программу
@solb123
@solb123 4 месяца назад
сделай туториал на винду пожайлуста!!!
@izotoperx
@izotoperx 4 месяца назад
Каким образом заменит то,а кто сцене будет дудеть в сакс и петь ? 😂
@Sergey_Kyl
@Sergey_Kyl 4 месяца назад
мдаааааааа. нафигггг токо счастье.
@sanbait
@sanbait 5 месяцев назад
а есть какая то ИИшка которая сможет написать мелодию из напева голосом кто то в курсе?
@nikitaarktorus2919
@nikitaarktorus2919 4 месяца назад
suno попробуй, офигеешь)
@sanbait
@sanbait 4 месяца назад
@@nikitaarktorus2919 это не то совсем
@olegsergeev3281
@olegsergeev3281 4 месяца назад
В DAW Муз редакторе Studio One 'это есть 5 лет уже, и на телефоне приложения, полно плагинов, выглядит как web интерфейс к удаленной такой программе. Всему давно обучили пк, а видеокарты ваши используют для крипты))))))
@Alik_msk
@Alik_msk 9 месяцев назад
Даже если ей удасться передать медодию. Кому это нужно по одной ноте играть, флейтисту и то они кажется тоде аккорды могут аоспроизводить))
@rikalexx
@rikalexx 3 месяца назад
Много кому это будет нужно) и да, флейта не сыграет вам аккорд xDDD
@user-lf6gg2hw6s
@user-lf6gg2hw6s Год назад
Очень криво конечно все определяет, с простой казалось бы задачей, хотя-бы найти точно сильную долю, ориентируясь на акценты и начало смены гармонии, не справляется. До возможности, её хоть какого то использования и пользы ещё очень и очень далеко.
@user-py2qt7rb5j
@user-py2qt7rb5j Год назад
Ждём. Когда расскажешь. Как делать
@user-py2qt7rb5j
@user-py2qt7rb5j Год назад
На Винде
@AlexisLionel
@AlexisLionel Год назад
Эту прям геморно запускать - убунта нужна, скрипты кривые. Я думаю, в течение месяца-двух выложат ещё более интересное что-то, что намного легче использовать будет. А если нет, могу потом стрим по этой провести с объяснениями.
@dinarasadieva1201
@dinarasadieva1201 8 месяцев назад
@@AlexisLionel выложили что - нибудь более интереснее? для винды? очень актуально для меня сейчас. Пожалуйста, соориентируйте, что из подобного есть для винды сейчас?
@AlexisLionel
@AlexisLionel 8 месяцев назад
@@dinarasadieva1201 насколько знаю, так ничего и не выложили. Очень невыгодно будет заинтересованным лицам, получающим с этого деньги, поэтому попытки что-то улучшить рубят с плеча.
@3asranka
@3asranka 7 месяцев назад
@@AlexisLionel мда, как же жаль. А можно вас попросить из двух видео миди вытащить? Линукса нет, к сожалению. Не сочтите за наглость, я самоучка, учусь играть по синтесии, есть две старые, но любимые аранжировки, чем только не пыталась вытащить миди - каша, замедляла видео и пыталась разобраться, но ракурс камеры не позволяет, авторам видео писала, одна играла на слух, нот нет, другой не отвечает, но в комментариях аккорды нашла, пыталась в них разобраться, так ничего из этого не вышло, уже отчаялась.
@slok1_
@slok1_ Год назад
а на винду как?
@DxD_Mushoku
@DxD_Mushoku 11 месяцев назад
phyton/powershell
@DxD_Mushoku
@DxD_Mushoku 11 месяцев назад
или ты не знаешь как с гитхаба качать?
@nazario4258
@nazario4258 4 месяца назад
@@DxD_Mushoku прикол, что прога идет только на linux
@OVS888
@OVS888 2 месяца назад
Тю та где ж она хорошо работает? Полностю всё запорото. Решила что начало такта не в первую долю а на 2 и😂 все ноты смещены на три восьмые раньше чем надо😂
@pinkow_yuga_999
@pinkow_yuga_999 29 дней назад
Пока не очень понятна цель этого действа. Ноты печатать для дальнейшего исполнения по нотам? Или еще для чего то? Композиторскую (сочиненную человеком) музыку вряд ли заменит. Пока что - то, что выдает сетка - это компиляция (при чем очень предсказуемая) того что уже есть ("с миру по нитке на симфонию Шнитке" 😂). В академической музыке - симфонической и камерной - вообще пока мимо. Правда надо сказать, что сетка легко заменит так называемый "авангард" (математическую музыку основанную на додекафонной серии, сонористики и всей этой лабуды). Там особо то и дарования не нужно. Музыка собирается и "пишется" как лего из детского конструктора. Создать по настоящему вдохновенную музыку сетка не сможет по весьма банальным причинам. Во первых нет интуиции, во вторых нет художественных эмоций (плакать и смеяться не заставит) и в третьих, настоящая музыка пишется с Верой. Есть понятия добра и зла, жизни и смерти, любви и ненависти. Сетка сможет это имитировать, но не жить в этом, как человек. Но есть одна опасность - у человека, имитирующего настоящие эмоции может потеряться смысл жизни, ощущение самосохранения ( опасность смерти), чувства природного секса и тогда процесс самоуничтожения человечества неизбежен...
@AlexisLionel
@AlexisLionel 29 дней назад
Полностью с Вами согласен, что ни один механический опус не сравнится с тем, что пишется людьми, в ком талант композиции есть от Бога. Но с другой стороны, и людей таких - единицы, а заменить посредственных музыкантов и композиторов нейросети уже в состоянии. И музыкальная интуиция, и способность передавать эмоции у нейросетей уже на вполне достойном уровне - точно выше среднего композитора. Сам недавно проигрался с Udio - нашумевшая музыкальная нейросеть, и даже я был шокирован тем, насколько быстро развивается отрасль. Я текстом описал стиль композиции, желаемые инструменты, стиль оркестровки и прочее - и за минуту получил песню. И развитие этих инструментов будет лишь ускоряться, чему настоящие музыканты будут лишь рады.
@pinkow_yuga_999
@pinkow_yuga_999 28 дней назад
@@AlexisLionel стоп стоп стоп... Интуиция у сетки - имитированная. Ее не может быть, пока не появятся биороботы (гибрид машины и человеческого сердца и мозга с кровеносными сосудами). Эмоции - тоже имитированные. Сетка не знает что такое боль, смерть, страх, счастье смех. Поэтому то, что Вы пишите в принципе с нынешними сетками невозможно. Если будет сделана сеть на основе реального сердца и мозга - тогда.... Сеть будет бояться смерти - у сети будет инстинкт самосохранения - тогда возможно появится и музыка. Но пока... Нереально...
@AlexisLionel
@AlexisLionel 27 дней назад
​@@pinkow_yuga_999 если сетка создаёт пьесы, способные вызывать у человека истинные эмоции и слёзы, то так ли важна семантика о том, истинная ли у сетки интуиция? Если её спросить о её эмоциях - она опишет их так же убедительно и тем же языком, что и люди. С таким же успехом можно назвать человеческие эмоции и музыкальную интуицию - искусственной. Творец вложил в людей свою искру, а люди вкладывают искру творения в машины - следующую, более совершенную ступень эволюции - и всё самое гениальное отныне будет создаваться ими. Самая прекрасная музыка, живопись, научные открытия, эмоции - уже к 2030 году будет прерогативой кремниевого мозга машин и их души, а не человеческой. Это пока в 2024 они примитивны, но даже на этом уровне способны на настоящее творчество.
@zawatsky
@zawatsky 10 месяцев назад
Как же она заменит, если перевести можно только _готовую_ музыку?! Автор и сам может к ней миди выложить, это не проблема. А вот новую писать... Нет, справится, но кому какое дело до творений бездушной железки? Интересно, что тебе своей музыкой именно человек сказать собирался!
@1_plus_1_ravno_vopros
@1_plus_1_ravno_vopros 7 месяцев назад
Так он говорил вроде о замене не композитора, а транскриптора
@Sharada38
@Sharada38 4 месяца назад
Ты не понял смысла программы
@zawatsky
@zawatsky 4 месяца назад
@@Sharada38по ходу, не я тут непонятливый. Автор оговорился, видать. Кстати, знакомый композитор всегда подбирает готовую музыку на слух, может хоть один в один, при этом, в отличие от ИИ, у него в мидяках не остаётся мусора. Так что даже тут если заменит, то очень нескоро.
@StratocasterTula
@StratocasterTula 4 месяца назад
Вообще бесполезная прога.Если бы она по партиям раскладывала то да. А так просто говной воняет от этой проги)
@maryart4536
@maryart4536 4 месяца назад
Так разложите на партии, есть проги онлайн и прогоните каждую партию в этой программе, получите ноты каждой партии
@MichaelPiano
@MichaelPiano Месяц назад
Та ну відстій це все .. фальшиво та не в ритм
@19Rzbikoff37
@19Rzbikoff37 2 месяца назад
Да, блин, щас - заменит! Голимая попса "Белые розы" и то, так смачно криво! У меня аж уши в трубучку свернулись...
Далее
ЛЕТО 2024:
00:21
Просмотров 536 тыс.
ПК с Авито за 3000р
0:58
Просмотров 1,8 млн
Лучший худший экран - PowKiddy RGB30
12:56