Un'istantanea del cambiamento nella musica popolare nell'ultimo decennio: 2008 vs 2018

Tra le altre citazioni memorabili sull'inno Rockstar del 2018, il filosofo moderno Post Malone ha scherzato "Man I feel like a rockstar". Con la passione per i dati abbiamo deciso di indagare: il rap è davvero il nuovo rock? O il nuovo pop? Il rock è ancora rilevante? Cosa descrive meglio i tipici testi pop? Esploriamo i chart-toppers del 2008 e del 2018 con alcune visualizzazioni.

Il metodo:

Abbiamo pensato che un buon punto di partenza sarebbe stato Billboard Hot 100 di fine anno, che misura le canzoni più popolari per radio airplay, dati di streaming e vendite (shoutout su Billboard, le classifiche sono disponibili qui). Abbiamo scritto un semplice raschietto web per ottenere questi dati. Usando le 100 migliori canzoni del 2018 e del 2008, il nostro obiettivo finale era quello di immergerci un po 'più a fondo per scoprire grandi cambiamenti nel settore della musica. Per fare un'analisi significativa, avevamo bisogno dei testi e del genere di ogni canzone. Il sito web AZL Cognomi (shoutout!), Fa un ottimo lavoro nel mantenere un database di testi molto scaricabile dal web; ma per paura che stessimo forse cercando di creare un sito in competizione con i loro preziosi dati ci ha bandito quando abbiamo tentato di raschiare i testi di queste 200 canzoni. Tuttavia, abbiamo avuto l'ultima risata quando siamo tornati con uno scraper leggermente più intelligente (leggi: più difficile da rilevare) e una VPN. [l'intero set di dati e lo scraper sono su Github, per chi fosse interessato]

I risultati:

Alcune cose da notare: piuttosto che occuparsi di più sottogeneri come trap-rap, EDM-pop ecc., Abbiamo deciso di dividere le canzoni in grandi generi di rap, R&B, pop, country e rock (con qualche manipolazione di Panda). Ad esempio, abbiamo classificato le canzoni Indie / Alternative come rock.

The Hot 100:

Prima di tutto, abbiamo la suddivisione dei primi 100 per genere: ciò che è più interessante qui - a nostro avviso - è l'emergere del rap e il lento declino del rock. I grafici a torta seguenti mostrano le quote dei generi nel tabellone per le affissioni hot 100 per gli anni 2018 e 2008.

Il rap ha quasi raddoppiato la sua quota tra i primi 100, mentre il rock è sceso da un mero 12% nel 2008 al 5% nel 2018. In effetti, vorremmo sostenere che il rap è ora il genere dominante, anche rispetto al pop (musica popolare, di definizione). Tuttavia, questi grafici possono essere visualizzati al meglio insieme a questi grafici a dispersione che mostrano la diffusione di numeri grafici tra i generi.

Gli scatter danno un'idea di quanto fossero popolari i generi ogni anno.

Guardando la trama del 2008, possiamo concludere che solo alcune canzoni rap hanno battuto i primi 40 - 6, per essere precisi - ma il pop ha avuto 20 successi in quella gamma. Ora, dopo un decennio, il numero di hit rap nella top 40 è esploso a 20, e il numero di canzoni pop nella top 40 è di conseguenza diminuito a 16. Rock, il quarto genere più popolare nel 2008, aveva 16 canzoni nella caldo 100; tuttavia, è stato il genere meno popolare nel 2018, contribuendo a solo 5 dei primi 100.

Testi:

Ora per la parte interessante: i testi delle canzoni popolari. Abbiamo realizzato dei grafici a scatole che mostrano il numero di parole in una canzone tipica di ogni genere. Come previsto, con ritmo e frequenza delle parole più ottimistici, le canzoni rap sono in media (mediane) di più - circa 600 parole / canzone sia nel 2008 che in 18. Altri generi sono anche coerenti tra i 2 anni: pop e R&B circa 400 parole / canzone , rock e country circa 300.

Abbiamo pensato che un'altra visione interessante sarebbe stata quella di confrontare il numero di parole distinte nelle canzoni (ripetizioni ignorate). Sapevamo che il rap sarebbe stato il genere da premiare con la ripetizione, ma siamo rimasti sorpresi nel constatare che nonostante avesse di gran lunga il maggior numero di parole, in entrambi gli anni non ha raggiunto la media del maggior numero di parole uniche per canzone. In effetti, nel 2008, le canzoni rap hanno registrato una media di oltre 100 parole uniche per canzone, ma questa è scesa a circa 80 nel 2018 (sospettiamo a causa dell'ascesa del rap ripetitivo molto ripetitivo, grazie a Migos!)

Nuvole di parole:

Infine, abbiamo pensato che sarebbe stato interessante creare nuvole di parole (visualizzare le parole che si verificano più frequentemente nei testi di un genere). La nostra conclusione: ha senso che i genitori vogliano tenere i loro figli lontano dal rap. È interessante notare che la nuvola di parole rap del 2008 sembra quasi quasi shakespeariana rispetto agli anni 2018, che è disseminata di termini e termini dispregiativi. Quindi sembra che i testi dei rap stiano peggiorando in termini di contenuto esaustivo. Alcuni approfondimenti bonus: le canzoni pop sono meglio caratterizzate da parole come "amore", "sapere", "volere" e "sentire", e i testi R&B sono da qualche parte tra Pop e Rap.

Questa analisi è ovviamente tutt'altro che perfetta, ma ci siamo divertiti e pensiamo di aver ricavato spunti interessanti. Se sei interessato a imparare come scrape web o creare alcuni di questi grafici, tutto il nostro codice e i nostri dati sono su Github. Grazie per aver letto! Prossimo: usiamo Machine Learning per provare a prevedere il genere di una canzone dai suoi testi (con più dati, ovviamente). Rimanete sintonizzati!