Konzert-Scraper für TheMovieDB (Musik-DVDs/BluRays)

mad-max

Nachdem ich mit dem IMDB-Scraper für Konzerte nicht so ganz zufrieden war, hab ich mir the MovieDB.org mal als Heimat der Konzert-Infos angesehen.

Vorteile hier waren:
- mehr/bessere Bilder
- über die API werden direkt mehrere Sprachen unterstützt
- die Modifikationen waren hier weitaus einfacher vorzunehmen

Deshalb habe ich den Scraper umgebaut und "TheConcertDB.org" genannt.
Basierend auf dem "TheMovieDB.org"-Scraper könnt Ihr jetzt für eure Musik-DVDs/BluRays in den Bereich
der Musivideos scannen.
Der Scraper funktioniert nach mehreren Test soweit gut. Das einzige was der Scraper nicht immer kann, ist die Zuordnung
des Konzertes zum Interpreten der Musikdatenbank.

[warnbox]ACHTUNG: Inhalt des Ornder mit den Konzerten muss auf Musikvideos gesetzt sein[/warnbox]
Auf jeden Fall habt Ihr mit dem Scraper Poster und Fanart-Support und ich habe jetzt auch ein oder zwei Konzerte schon in deutsch hinterlegt.
Da wäre es cool, wenn noch der ein oder andere seine Konzerte dort auf deutsch eintragen würde.

Da der Scraper auf dem Eden-Pre-Framework und dessen Dependencies aufbaut findet Ihr den Scraper im Ede-Pre-Repo von uns--->Repository Eden-Pre
Dharma habe ich nicht getestet und dafür will ich eigentlich auch keinen Support mehr machen, da Eden ja so lange nicht mehr dauern wird.

Hier noch zwei Bilder...
Einmal, was aus dem Scraper rausfällt:

Externer Inhalt www.xbmcnerds.com

Inhalte von externen Seiten werden ohne Ihre Zustimmung nicht automatisch geladen und angezeigt.

Und einmal wie so eine Konzert-Sammlung dann aussehen kann:

Externer Inhalt www.xbmcnerds.com

Inhalte von externen Seiten werden ohne Ihre Zustimmung nicht automatisch geladen und angezeigt.

Viel Spass damit...

mad-max

mad-max

Neue Version 1.1:

Der Scraper kann jetzt in vielen Fällen den Interpreten des Konzerts dem Interpereten aus der Musik-DB zuordnen!
Thx und Credits gehen an Olympia von Team-XBMC, der hier Schützenhilfe geleistet hat

mad-max

littlemixi

Hier hab ich ja noch gar nicht gepostet Danke erstmal an den Mad Max für dieses schöne Spielzeug. Ich hab jetzt folgendes Problem: Ich habe diverse mkv oder avi Dateien die leider nicht gescrappt werden können, da es sie nicht in der Datenbank gibt, z.B. Metallica - Fan Can Six, Copenhagen (da der MM ja so einige Metallica DVD's hat..kann man die nfo so umbiegen, damit XBMC das nun erkennt..bei Filmen und TV-Shoes geht's ja..leider geht es nicht bei der Musikbibo..was kann ich/man tun??

mad-max

Du kannst dir ne Standard-Musikvideo NFO nehmen und die ausfüllen und beilegen.
Guck mal hier, ne Vorlage:

XML

<?xml version="1.0" encoding="UTF-8" standalone="yes" ?>
<musicvideo>
    <title></title>
    <rating>0.000000</rating>
    <epbookmark>0.000000</epbookmark>
    <year></year>
    <top250>0</top250>
    <track></track>
    <album></album>
    <votes></votes>
    <outline></outline>
    <plot></plot>
    <tagline></tagline>
    <runtime></runtime>
    <mpaa></mpaa>
    <playcount>0</playcount>
    <lastplayed></lastplayed>
    <id></id>
    <director></director>
    <premiered></premiered>
    <status></status>
    <code></code>
    <aired></aired>
    <studio></studio>
    <trailer></trailer>
    <artist></artist>
</musicvideo>

Alles anzeigen

mm

littlemixi

Hey cool..danke dir..eine Frage noch..was muss ich wo eintragen, damit,zB. 3DVD unter einem Namen auftauchen, ähnlich dem Set Manager

mad-max

Zitat

Hey cool..danke dir..eine Frage noch..was muss ich wo eintragen, damit,zB. 3DVD unter einem Namen auftauchen, ähnlich dem Set Manager

Du solltest einfach das set tag setzen koennen...keine ahnung ob dad jedoch von musikvideos unterstuetzt wird...hab ich noch nicht getestet...

Sent from my HTC Sensation XE using Tapatalk

littlemixi

ok..test ich mach ne Rückmeldung...

littlemixi

Wie muss eigentlich die nfo heißen..musicvideo??

mad-max

Zitat von littlemixi

Wie muss eigentlich die nfo heißen..musicvideo??

so-wie-die-avi-heisst.nfo

littlemixi

..muss man ja wissen..geht supa..

littlemixi

Zitat von mad-max

Du solltest einfach das set tag setzen koennen...keine ahnung ob dad jedoch von musikvideos unterstuetzt wird...hab ich noch nicht getestet...

Funzt nicht..

pitgrap

Erstmal vielen Dank. Der ConcertDB Scraper funktioniert einwandfrei. Nur bei 2 Konzerten von mir wird der Titel nicht angezeigt. Quasi 2 leere Einträge in der Liste. Das Jahr und weitere Infos werden korrekt angezeigt. Mit dem Original MovieDB Scraper gab es kein Problem.

Es handelt sich um diese Einträge:
- http://www.themoviedb.org/movie/25093-queen-rock-montreal
- http://www.themoviedb.org/movie/86953-be…i-am-world-tour

mad-max

Also Queen Rock Montreal hab ich auch in der DB...das lies sich problemlos scrapen...
Kannst du mal mit nem externen DB Editor prüfen ob das Feld wirklich leer ist, oder nur nichts angezeigt wird?
Alternativ kannst du die NFOs mal exportieren und gucken was so drinne steht...die NFO kannst du auch ruhig mal hochladen...

mm

pitgrap

Zitat von mad-max

Kannst du mal mit nem externen DB Editor prüfen ob das Feld wirklich leer ist, oder nur nichts angezeigt wird?
Alternativ kannst du die NFOs mal exportieren und gucken was so drinne steht...die NFO kannst du auch ruhig mal hochladen...
mm

Beyonce - I Am World Tour (2010).nfo

XML

<?xml version="1.0" encoding="UTF-8" standalone="yes" ?>
<musicvideo>
    <title></title>
    <rating>0.000000</rating>
    <epbookmark>0.000000</epbookmark>
    <year>2010</year>
    <top250>0</top250>
    <track>-1</track>
    <album></album>
    <votes></votes>
    <outline></outline>
    <plot>108 Shows, 78 Cities, 32 Countries, 6 Continents, 1.1 Million Fans.Tracklist:01 Intro02 Crazy In Love03 Naughty Girl04 Tomorrow I Am Sasha Fierce05 Freakum Dress06 Get Me Bodied07 Smash Into You08 Ave Maria09 Broken-Hearted Girl10 If I Were A Boy / You Oughta Know11 Robot12 Diva13 Socks &amp; Stilettos14 Ego feat. Kanye West15 Hello16 Sasha vs. Beyonc├⌐17 Baby Boy / You Don&apos;t Love Me, No No No18 Irreplaceable19 Check On It20 Bootylicious21 Upgrade U22 Video Phone23 Are You Filming Me With That?24 Say My Name25 At Last26 Listen27 Single Ladies Contest28 Single Ladies (Put A Ring On It)29 Halo</plot>
    <tagline></tagline>
    <runtime>99</runtime>
    <thumb preview="http://cf2.imgobject.com/t/p/w500/rikCbzPUOHQTeG6ygms8TKejwRM.jpg">http://cf2.imgobject.com/t/p/original/rikCbzPUOHQTeG6ygms8TKejwRM.jpg</thumb>
    <thumb preview="http://cf2.imgobject.com/t/p/w500/iSTfKtqF6D82hqdTBD5OPTBsmIg.jpg">http://cf2.imgobject.com/t/p/original/iSTfKtqF6D82hqdTBD5OPTBsmIg.jpg</thumb>
    <mpaa></mpaa>
    <playcount>0</playcount>
    <lastplayed></lastplayed>
    <id></id>
    <genre>Musik</genre>
    <director>Ed Burke</director>
    <premiered></premiered>
    <status></status>
    <code></code>
    <aired></aired>
    <trailer></trailer>
    <fileinfo>
        <streamdetails>
            <video>
                <codec>xvid</codec>
                <aspect>1.818182</aspect>
                <width>640</width>
                <height>352</height>
                <durationinseconds>5976</durationinseconds>
            </video>
            <audio>
                <codec>mp3</codec>
                <language></language>
                <channels>2</channels>
            </audio>
        </streamdetails>
    </fileinfo>
    <resume>
        <position>0.000000</position>
        <total>0.000000</total>
    </resume>
</musicvideo>

Alles anzeigen

Queen Rock Montreal And Live Aid (2007).1080p.nfo

XML

<?xml version="1.0" encoding="UTF-8" standalone="yes" ?>
<musicvideo>
    <title></title>
    <rating>0.000000</rating>
    <epbookmark>0.000000</epbookmark>
    <year>2007</year>
    <top250>0</top250>
    <track>-1</track>
    <album></album>
    <votes></votes>
    <outline></outline>
    <plot>&quot;Queen&quot; ist eine 1970 gegr├╝ndete Rockband aus Gro├ƒbritannien. Die vierk├╢pfige Besetzung blieb 20 Jahre unver├ñndert zusammen, bis ihr S├ñnger &quot;Freddie Mercury&quot; 1991 im Alter von 45 Jahren an den Folgen einer Lungenentz├╝ndung starb. Die Band gilt bis heute, nach ├╝ber 700 Live-Auftritten und ├╝ber 150 Millionen verkauften Platten, als eine der kommerziell erfolgreichsten Bands aller Zeiten. Sie sind weltweit bekannt, ihre Singles und Alben erreichten regelm├ñ├ƒig Platz 1 der Charts und ihre Konzerte waren fast immer komplett ausverkauft. Sie stellten mehrere Rekorde auf, wie z.B. beim Konzert in Sao Paulos Morumbi Stadium, als sie am ersten Abend vor 131.000 und am zweiten Abend vor 128.000 Zuschauern spielten oder als sie nach ihrer ersten Tour in Argentinien gleich 9 von 10 Positionen in den dortigen Top 10 Album Charts belegten. Die Band ist bis heute sehr aktiv.</plot>
    <tagline></tagline>
    <runtime>95</runtime>
    <thumb preview="http://cf2.imgobject.com/t/p/w500/q1t4PWvOJYJj6uH7BtWeF767ILL.jpg">http://cf2.imgobject.com/t/p/original/q1t4PWvOJYJj6uH7BtWeF767ILL.jpg</thumb>
    <thumb preview="http://cf2.imgobject.com/t/p/w500/AtMKehpiQCMlQUo7jWcOCX3eXwj.jpg">http://cf2.imgobject.com/t/p/original/AtMKehpiQCMlQUo7jWcOCX3eXwj.jpg</thumb>
    <mpaa></mpaa>
    <playcount>0</playcount>
    <lastplayed>2012-02-16 23:55:22</lastplayed>
    <id></id>
    <genre>Musik</genre>
    <director>Saul Swimmer</director>
    <premiered></premiered>
    <status></status>
    <code></code>
    <aired></aired>
    <studio>Queen Productions Ltd.</studio>
    <trailer></trailer>
    <fileinfo>
        <streamdetails>
            <video>
                <codec>h264</codec>
                <aspect>1.777778</aspect>
                <width>1920</width>
                <height>1080</height>
                <durationinseconds>5710</durationinseconds>
            </video>
            <audio>
                <codec>dca</codec>
                <language></language>
                <channels>6</channels>
            </audio>
        </streamdetails>
    </fileinfo>
    <resume>
        <position>2391.334229</position>
        <total>5710.000000</total>
    </resume>
</musicvideo>

Alles anzeigen

Wie man sieht ist der Titel leer. Ich kann die beiden Einträge auch nicht aus XBMC entfernen. Ich bestätige mit ja und nichts passiert. Ich habe auch versucht mit XBNE mir die Einträge anzugucken, jedoch zeigt das Programm mir nicht die Konzerte an oder gibt es da einen Trick?

mad-max

Schreib mal einen Titel rein und mach ein rescan...was passiert dann?

pitgrap

Ich hab es jetzt anders gelöst. ich habe den Eintrag direkt in der Datenbank geändert (sqlite3explorer). Nun wird er angezeigt. Interessanterweise wird dieser aber wieder gelöscht, wenn ich den Eintrag aktualisiere (nicht aus der nfo, sondern Internet). Da gibt es dann eigentlich nur noch 2 Fehlerquellen, themoviedb.org liefert falsche Daten oder der Scraper speichert diese nicht richtig. EDIT: Noch ein Hinweis. Der Scraper ist auf DE eingestellt (Sprache).

Achso, dabei fällt mir aber noch was anderes ein. In der Info-Ansicht ist der Button "Lade Fanart" deaktiviert. Hat das einen Grund? "Lade Poster" geht.

pitgrap

Moin, ich habe das ganze nochmal untersucht und den Fehler gefunden. Der ConcertDB-Scraper erwartet im Titel ein ":". Gibt es das nicht, kann er nicht den Artist und Titel erkennen.

Beispiel:
http://www.themoviedb.org/movie/77475-en…om-planet-earth

Titel vorher: Enter Shikari - Live From Planet Earth -> ging nicht
Geändert in: Enter Shikari: Live From Planet Earth -> geht

Vielleicht kann der Scraper dahingehend angepasst werden, dass er auch "-" als Trennzeichen akzeptiert.

stormbringer

Ich glaube , das muß ich mir mal ansehen , wäre ne geile Sache für meine Metal-Konzerte --------------YEAH!!!!!!!!!!!!!!

mad-max

Nur ne kurze Info:
https://github.com/xbmc/xbmc/pull/852

Ti-ejtsch

Wo kann man diesen Scraper downloaden?

Ti-

Konzert-Scraper für TheMovieDB (Musik-DVDs/BluRays)

Jetzt mitmachen!

Benutzer online in diesem Thema