Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

ARD: Vorab-Folgen von Serien nicht verfügbar #969

Open
pidoubleyou opened this issue Mar 19, 2024 · 5 comments
Open

ARD: Vorab-Folgen von Serien nicht verfügbar #969

pidoubleyou opened this issue Mar 19, 2024 · 5 comments
Assignees
Labels

Comments

@pidoubleyou
Copy link
Contributor

pidoubleyou commented Mar 19, 2024

In der ARD-Mediathek werden meist die Folgen für die kommende Woche vorab zur Verfügung gestellt.
Der Crawler findet diese Folgen seit einiger Zeit nicht mehr, sie tauchen erst mit der Ausstrahlung auf.

Beispiel: Dahoam is Dahoam

betrifft nicht nur Vorab-Folgen sondern auch andere Bereiche, z.B. die Weltspiegel-Dokus

Die ARD-Webseite verwendet mittlerweile andere APIs als der Crawler, um aus den Sendungsübersichten die einzelnen Folgen zu ermitteln.

@styroll
Copy link

styroll commented Mar 29, 2024

@pidoubleyou sagte: Die ARD-Webseite verwendet mittlerweile andere APIs als der Crawler, um aus den Sendungsübersichten die einzelnen Folgen zu ermitteln.

Ist das auch der Grund, weshalb bei der Kafka-Folge 2 die Standard-Variante (statt AD-Variante) über diese API-Seite nicht gefunden wird? Wenn ich beim Aufrufen der Webseite zur Folge den Netzwerkverkehr studiere, sehe ich, dass nach Aufruf der obigen API-Seite diese API-Seite aufgerufen wird, wo sich dann auch die Standard-Variante findet (kind: "standard")…

grafik

… jedoch auch korrekt gelabelt die AD-Variante (kind: "audio-description"; alles getestet für die Full-HD-Version):

grafik

yt-dlp scheint diese zweite API-Seite aufzurufen, denn die Links dort sind korrekt gelabelt und vollständig.

@codingPF codingPF self-assigned this Apr 8, 2024
@codingPF
Copy link
Member

Das Kafka Problem konnte ich finden und versuche mal einen minimal fix…
Ob das auch das Vorschau Problem löst, ist mir unklar.

@codingPF
Copy link
Member

Adding more food

@pidoubleyou
Copy link
Contributor Author

Die Änderungen haben leider nicht das Vorab-Problem gelöst:

Heute Montag finde ich auf der Seite von Dahoam is Dahoam die Vorab-Folgen bis Donnerstag, in der Filmliste ist nur die vom Montag enthalten.

@pidoubleyou
Copy link
Contributor Author

Ich habe die Ursache gefunden, warum die Vorabfolgen fehlen:
die Topics werden bei der Suche nicht gefunden. Ich habe in einem temporären Workaround die mir bekannten Topics hinzugefügt (siehe f207d59).

In der Mediathek sind für diese Topics spezifische Seiten verlinkt, die nicht dem üblichen Schema entsprechen. Könnte der Grund sein, warum die Topics nicht automatisch gefunden werden.

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
Projects
None yet
Development

No branches or pull requests

3 participants