Audio boncolás: mixből midi multi-track!

[DeMarco]

Nem tudom van-e aki használ v kisérletezik itt ilyen témával?

Volt régen egy szoftver a Ceremony Melodyne mely képes volt egyszólamú sávokból visszanyerni midi nyelven a játszott dallamot. Később beszélték hogy ez most már kezd komplett több szólamú zenékre is működni egy teljesen más szoft segítségével.

Esetleg hallott már erről vki bővebbet?

Ilyenek érdekelnének:

- mennyire 100%-osan működik már?

- milyen gyors a folyamat?

- teleeffektezett dance zenékre is működik?

- esetleg komplex szimfónikus műveket is lehet visszafejteni?

Köszi az infót előre is!

[deneverstudio]

Hát amúgy nagyon érdekes kérdéskör és nagyon bonyolult is egyben.

Az nem zárható ki, hogy előbb utóbb valami hasonló utánzatot lehet csinálni automatikusan,

de pontosan leszedni, hogy valójában melyik hangszer mit csinál azt szerintem

100%-ban soha nem lehet megoldani.

 

Ezt a dolgot jelenleg egy jó fülű zenész ezerszer pontosabban csinálja,

de ennek ellenére nincs olyan, aki ne tévedne kisebb dolgokban.

Hajszál pontos partitúrát írni egy mixből csaknem lehetetlen, de persze ez erősen műfajfüggő.

Van ahol minden hallatszik tisztán és van ahol nagyon nehéz rájönni minden apróságra.

Lassan 30 éve csinálom ezt és nagyon sok olyan dolgot leszedtem már, amit szinte mindenki más rosszul.

Ennek ellenére amikor hozzájutok egy-egy ismert dal eredeti sávjaihoz, akkor mindig van pár meglepetés,

amiről kiderül, hogy mindenki rosszul játssza. Ezek szinte semmilyen trükkös módszerrel nem kimutathatók a mixből,

így jól leszedni inkább a véletlen műve. Sok ilyet tudnék mutatni.

 

Ezért is gondolom azt, hogy ez sohasem fog jól működni.

Az még nem jelent semmit, hogy egy szoftver esetleg megtalálja a fő hangokat és nem rak bele hamis dolgokat.

Ez még fényévekre van a valódi témák reprodukálásától.

[deneverstudio]

Ez soha nem fog rendesen működni. Ha a 10%-ot eléri, már az is csoda lesz. Jelenleg egyszólamú sávokat sem lehet hibátlanul átültetni. Illetve programozott, különálló sávokat, ami eleve MIDI-ből jött, azt valószínűleg már vissza lehet fejteni, de élő dolgokat nem. Maximum csak nagyon együgyű témákat. Egyszerű dolgokat viszont már akár több szólam esetén is elképzelhető, mert az újabb Melodyne pl. kezeli.

[oldbrian]

a válasz továbbra is Melodyne: http://www.celemony.com/en/melodyne/functions - próbáld ki a 30 napos trial verziót, hogy lásd, a te igényeidnek megfelelőt nyújt-e vagy sem. idő-frekvencia alapon dolgozik ez is, így bármi, ami a spektrumra hosszan ráül és maszkolja az igazi "kotta" részt, az csökkenti a hatékonyságát. 

 

egyébként a probléma nehéz és aktívan kutatott mind a mai napig, két évvel ezelőtt egy cikknek például itt van egy kísérő oldala, programmal és hanggal: http://bass-db.gforge.inria.fr/fasst/

[DeMarco]

Nos akkor mégsincs itt a kánaán.

Amúgy persze hogy nehéz dolog ez, tiszta mesterséges inteligencia mint az agynál is a folyamatos tanulása a hallottaknak, mondván egy hármashangzatot se ismer fel senki még nem kezdett el szolfézst tanulni. Persze hangfrekvencia elemzésen a gépeknél más a szitu és másak a korlátok is biztos, de így lehet ahogy írva vagyon, hogy pl. egy 3 layeres szinti hangot is ha vki ezzel aktívan foglalkozik már szét tud választani agyilag sztem.

[deneverstudio]

Nagyon komoly kutatások kellenek ehhez még szerintem.

Egyébként igen sok mindent meg lehetne tudni az agy működéséről,

ha ezt komolyabban vizsgálnánk, mert egy nagyon összetett dologról van szó,

amikor 5-10, vagy még több hangszert szétválaszt az ember agya és lebogarássza,

hogy ki mit játszik.

 

Úgy tudna ez gépileg működni valamennyire, ha komoly oktatáson venne részt a gép.

Hangszerek jellegzetes soundjai, összhangzattan minden műfajban, stb.

Meg egy adatbázisba be kéne neki táplálni több millió dal partitúráját és hullámformáját,

amiben tudna hasonló dolgok után kotorászni, mint az adott feladat.

Szóval technológiailag iszonyatos kihívás, a társadalmi haszna meg a nullához konvergál,

így aztán nem valószínű, hogy ez lesz a slágertéma a kutatók körében.

Előbb fog ember menni a Marsra.