29
Mikä biisi tää on? Musiikintunnistuspilotti Provinssissa MARS 8.2.2013 Teosto

Mikä biisi tää on? -presentaatio @ MARS-festivaali

Embed Size (px)

Citation preview

Page 1: Mikä biisi tää on? -presentaatio @ MARS-festivaali

Mikä biisi tää on?Musiikintunnistuspilotti Provinssissa

MARS 8.2.2013

Teosto

Page 2: Mikä biisi tää on? -presentaatio @ MARS-festivaali

Mitä on automaattinen musiikintunnistus?

Page 3: Mikä biisi tää on? -presentaatio @ MARS-festivaali

Kuvat: SoundHound, Shazam

Page 4: Mikä biisi tää on? -presentaatio @ MARS-festivaali

4

Äänitteiden tunnistus

ÄÄNITE-/SORMENJÄLKI-TIETOKANTA

SOIVA ÄÄNITE•RADIO•TV•ONLINE•TAUSTAMUSIIKKI = ?

Page 5: Mikä biisi tää on? -presentaatio @ MARS-festivaali

Kuvat: SoundHound, Shazam

Page 6: Mikä biisi tää on? -presentaatio @ MARS-festivaali

6

Live-/coverversioiden tunnistus

ÄÄNITE-/SORMENJÄLKI-TIETOKANTA

LIVE-ESITYS TAI COVERVERSIO•ERI TEMPO?•ERI SOITTAJAT?•ERI INSTRUMENTIT?•ERI RAKENNE?•ERI SÄVELLAJI?•YLEISÖN METELI?

= ?

???

Page 7: Mikä biisi tää on? -presentaatio @ MARS-festivaali

Livemusiikki on ongelma. Miksi?

• Livemusiikin tunnistus on moninkertaisesti vaikeampaa kuin levymusiikin

• Kaupallisia palveluita tarjolla: 0 kpl

Kuva: Turo Pekari

Page 8: Mikä biisi tää on? -presentaatio @ MARS-festivaali

8

Page 9: Mikä biisi tää on? -presentaatio @ MARS-festivaali

9

Page 10: Mikä biisi tää on? -presentaatio @ MARS-festivaali

10

Page 11: Mikä biisi tää on? -presentaatio @ MARS-festivaali

11

1. Tällaista ei ole tehty aikaisemmin

-tehdään ensimmäisenä Suomessa2. Se on kuitenkin mahdollista

-BMAT on teknisesti edellä muita - käytössä toimivin tunnistusalgoritmi, mutta ei valmista palvelua3. Potentiaaliset hyödyt ovat isot

-Festareiden ja livekeikkojen automaattinen musiikin käytön raportointi

Page 12: Mikä biisi tää on? -presentaatio @ MARS-festivaali

12

Yhteistyökumppanit

Nightwish PMMP Notkea Rotta

Kuvat: Yleisradio, OKM, Provinssirock

Page 13: Mikä biisi tää on? -presentaatio @ MARS-festivaali

13

LIVE VS. ÄÄNITE -PARITVERTAILUUN

HPCP (Harmonic Pitch Class Profile)

SIMILARITY MATRIX

VEKTORIEN ETÄISYYDET = 0-100

“[…] 12-ulotteisten vektorien sarja, joissa vektorit kuvaavat länsimaisen 12-sävelasteikon

energiaa/voimakkuutta signaalissa tietyllä hetkellä.”

Page 14: Mikä biisi tää on? -presentaatio @ MARS-festivaali

Tunnistusmenetelmä

Page 15: Mikä biisi tää on? -presentaatio @ MARS-festivaali
Page 16: Mikä biisi tää on? -presentaatio @ MARS-festivaali
Page 17: Mikä biisi tää on? -presentaatio @ MARS-festivaali
Page 18: Mikä biisi tää on? -presentaatio @ MARS-festivaali

• 3 keikkaa, 3 päivää•(Pe) Nightwish •(La) PMMP •(Su) Notkea Rotta• 6 tallennetta • äänipöytä/yleisö (wav/mp3)• Referenssidata:• 231 kappaletta (mp3)• Artistien levytetty tuotanto

Provinssirock 13-15.6.2012

Kuva: Turo Pekari

Page 19: Mikä biisi tää on? -presentaatio @ MARS-festivaali

PMMP

100%

Kuva: Turo Pekari

Page 20: Mikä biisi tää on? -presentaatio @ MARS-festivaali

NIGHTWISH 81%

Kuva: Turo Pekari

Page 21: Mikä biisi tää on? -presentaatio @ MARS-festivaali

NOTKEA ROTTA

0%

Kuva: Turo Pekari

Page 22: Mikä biisi tää on? -presentaatio @ MARS-festivaali

• Menetelmä on hyödynnettävissä tietyin varauksin jo nyt osaan genreistä sellaisenaan esim. mainstream pop/rock

• Tunnistus ei vaadi täydellistä äänenlaatua: tunnistuksessa ei merkittäviä eroja äänipöytä- ja yleisötallenteiden välillä.

Kuva: Turo Pekari

Page 23: Mikä biisi tää on? -presentaatio @ MARS-festivaali

• Referenssidatan koko rajoitettu: tunnistusjärjestelmä toimii nopeasti <1000 äänitteen referenssimäärällä.

Kuva: Turo Pekari

Page 24: Mikä biisi tää on? -presentaatio @ MARS-festivaali

24

Kolme mallia käyttöönottoon

1. ISOT FESTARIT ENSIN?

-paras hyötysuhde;korvaukset vs.tunnistuksen hinta?

2. KIINTEÄT ASENNUKSET ISOILLE/ AKTIIVISILLE KEIKKAPAIKOILLE?

-Klubit, viihdekeskukset,laivat-Paljon tunnistuksia/vuosi-Yhdistettynä

mekaanisenmusiikin tunnistukseen?

3. KIERTUEET /ARTISTI-KOHTAINEN KÄYTTÖ?

-”opt-in”: vaihtoehtona manuaaliraporteille

Page 25: Mikä biisi tää on? -presentaatio @ MARS-festivaali

25

Jatkoa?

Page 26: Mikä biisi tää on? -presentaatio @ MARS-festivaali

26

DJ-pilotti

• Neljä suomalaista DJ:tä• 1-2 tallennettua settiä

/DJ• Selvitetään teknologian

soveltuvuutta klubiympäristöön /DJ-käyttöön

• BMAT:n live-/coverversioiden tunnistusteknologia•Vertailu äänite-referensseihin•Tulokset maaliskuun lopussa

Page 27: Mikä biisi tää on? -presentaatio @ MARS-festivaali

27

Voisiko keikkojen raportoinnin ulkoistaa faneille?

Teosto/Taloustutkimus: Kyselytutkimus 1/2013, n=638

• 78% osaa nimetä suurimman osan lempiartistinsa keikkabiiseistä

• 41% on joskus tehnyt päivityksiä somepalveluihin suoraan keikalta

•12% on kiinnostunut tuottamaan sisältöä settilista-palveluun

Stam1na PMMPMetallica Mokoma Muse

Chisu Nightwish Amorphis

Page 28: Mikä biisi tää on? -presentaatio @ MARS-festivaali

28

• Seminaari + raportti maaliskuussa

• Pilotit jatkuvat 2013!

Lisätiedot/ ota yhteyttä:• Ano Sirppiniemi ([email protected])

• Turo Pekari ([email protected])

www.teosto.fi

www.bmat.com

Page 29: Mikä biisi tää on? -presentaatio @ MARS-festivaali