Tirsvad-Udemy-100-days-of-code/046-scraping-the-billboard
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
Page: Step 1 Scrape the Billboard da
Pages
Home da Home ms Home Setup and Run da Setup and Run ms Setup and Run Step 1 Scrape the Billboard da Step 1 Scrape the Billboard ms Step 1 Scrape the Billboard Step 2 YouTube Music Authentication da Step 2 YouTube Music Authentication ms Step 2 YouTube Music Authentication Step 3 Create the Playlist da Step 3 Create the Playlist ms Step 3 Create the Playlist Step 4 Search and Add Songs da Step 4 Search and Add Songs ms Step 4 Search and Add Songs
Clone
1
Step 1 Scrape the Billboard da
Tirsvad edited this page 2026-10-28 07:41:17 +01:00
Table of Contents

Trin 1 - Scrape Billboard Hot 100

🌐 English · Dansk · Bahasa Melayu

Hvad trinnet gør

Programmet beder om en dato i formatet YYYY-MM-DD, henter https://appbrewery.github.io/bakeboard-hot-100/<date>/ og læser de 100 sange ud af HTML'en. Bakeboard er kursets kopi af Billboard Hot 100, fordi den rigtige side kan ændre sig eller få en betalingsmur når som helst.

python -m musical_time_machine --list-only

Bakeboard-siden for 2026-04-18:

Bakeboard Hot 100-siden for 2026-04-18

Programmets output (gengivet ud fra teksten fra en rigtig kørsel, ikke et foto af et terminalvindue):

Output fra trin 1 for 2026-04-18

Det lærte vi

  • At læse en hjemmeside som data. BeautifulSoup gør HTML til et træ, og en CSS-selektor (div.chart-entry, h3.chart-entry__title) udpeger de dele, vi vil have. Vi fandt selektorerne ved først at se på sidens markup.
  • At være en høflig klient. En anmodning har hoveder (headers); User-Agent fortæller serveren, hvilken slags klient der spørger. En timeout og raise_for_status() får en langsom eller manglende side til at fejle tydeligt i stedet for at hænge.
  • At validere input ved grænsen. parse_chart_date accepterer kun rigtige YYYY-MM-DD-datoer, så resten af programmet aldrig ser en ugyldig dato.
  • At teste uden netværk. Hitlistesiden er gemt under tests/fixtures/, og scraperen tager sin sidehenter som parameter, så testene kontrollerer 100 sange uden en eneste anmodning.
  • At samle viden ét sted. URL, selektorer og beskeder ligger i constants.py; hvis Bakeboard ændrer sit markup, er det én fil, der ændres.

Musical Time Machine

Languages