[DISCONTINUED] easyEPG Grabber // WebGrab++ Alternative [v0.4.3 | 2020/01/11]

/home/USR/easyepg

hi
@DesasterMaster @cbg
Diese Probleme hatte ich auch umgehe dieses in dem ich alles (Script und cron) betrifft unter dem user, der tvheadend ausführt (siehe top - meistens hts), mache

# Anleitung zum Installieren folgen, dann bei # Create any directory in your desired location, e.g.:
# zum user wechseln
sudo su hts
#weiter der Anleitung folgen bis chmod
chmod 0777 ~/easyepg
chmod 0777 ~/easyepg/*
#unter hts ist kein root möglich und hier auch nicht nötig

Ein Script erstellen

cd ~/easyepg
nano easyepg.sh
#folgenden Text eingeben
#!/bin/bash
cd ~/easyepg && bash epg.sh && cat ~/easyepg/xml/magentatv_de.xml | socat - UNIX-CONNECT:/home/hts/.hts/tvheadend/epggrab/xmltv.sock && cat ~/easyepg/xml/magentatv_de.xml | socat - UNIX-CONNECT:/home/hts/.hts/tvheadend/epggrab/xmltv.sock
#Ausführbar machen
chmod +x easyepg.sh

Crontab erstellen

crontab -e
#und folgendes eintragen
@reboot ~/easyepg/easyepg.sh
#statt @reboot kann man natürlich alle beliebigen Zeiten eintagen

Vielleicht hilft Dir dies ein wenig

tschau nepo

Zitat von easy4me

Dann müsste der Befehl wie folgt lauten:

Code

0 3 * * * cd /home/USR/easyepg && bash epg.sh

Dann kann auch der root-User das Skript ausführen.

Jetzt funktioniert das. Vielen Dank
Wenn die xml erstellt ist muss diese noch an Tvh weitergegeben werden. Bei mir ist der Pfad in Tvh

/var/spool/hts/config/epggrab/xmltv.sock

Muss ich da auch noch was ändern?

0 6 * * * cat /home/<user>/easyepg/xml/<file> | socat - UNIX-CONNECT:/home/hts/.hts/tvheadend/epggrab/xmltv.sock
5 6 * * * cat /home/<user>/easyepg/xml/<file> | socat - UNIX-CONNECT:/home/hts/.hts/tvheadend/epggrab/xmltv.sock

Den Benutzer hts gibt es in /home nicht

Zitat von DesasterMaster

/var/spool/hts/config/epggrab/xmltv.sock

Nein, den richtigen Pfad hast du schon weiter unten angegeben

Zitat von DesasterMaster

/home/hts/.hts/tvheadend/epggrab/xmltv.sock

Zitat von DesasterMaster

0 6 * * * cat /home/<user>/easyepg/xml/<file> | socat - UNIX-CONNECT:/home/hts/.hts/tvheadend/epggrab/xmltv.sock

Muß natürlich noch angepasst werden für <user> und <file>

@edit natürlich vorher in TVheadend unter EPG Grabber Modules "External XMLTV" aktivieren

Zitat von DeBaschdi

Wenn das noch der ein oder andere testen mag, wäre toll. vllt auch mal ein "schwaches" system, dann würde ich das ins git schaufeln

Mein System:
Odroid HC2 (ARM)
OpenMediaVault
easyepg im Docker

Das IMDB Grabben geht jetzt deutlich schneller. Beim zweiten Durchgang 3 min für 26 Sender und 7 Tage. CPU Auslastung liegt bei 50-80%. Vorher unter 10%.
Nur der Statusbalken funktioniert nicht. Bleibt bis kurz vor Schluss an der ersten Stelle.

und der cronjob wird auch als root ausgeführt ?

Teste doch einfach, indem du die Zeit des Cronjobs ein paar Minuten in der Zukunft setzt, ob auch alles funktioniert

0 6 * * * cat /home/USR/easyepg/xml/xmltv.xml | socat - UNIX-CONNECT:/home/hts/.hts/tvheadend/epggrab/xmltv.sock
5 6 * * * cat /home/USR/easyepg/xml/xmltv.xml | socat - UNIX-CONNECT:/home/hts/.hts/tvheadend/epggrab/xmltv.sock

So sieht das jetzt aus. Ist das richtig?

bei

09 15 * * * cat /home/USR/easyepg/xml/xmltv.xml | socat - UNIX-CONNECT:/home/hts/.hts/tvheadend/epggrab/xmltv.sock

kommt

2019/06/08 15:09:01 socat[572] E connect(5, AF=1 "/home/hts/.hts/tvheadend/epggrab/xmltv.sock", 45): No such file or directory

bei

07 15 * * * cat /home/USR/easyepg/xml/xmltv.xml | socat - UNIX-CONNECT:/var/spool/hts/config/epggrab/xmltv.sock

kommt kein Fehler aber die xmltv.sock ist eine 0 byte Datei und Tvh liest auch nicht ein

Zitat von DeBaschdi

wenn dein hts in /var/spool/hts/config/epggrab/xmltv.sock liegt,
ist
/home/hts/.hts/tvheadend/epggrab/xmltv.sock
falsch.

die sock ist immer 0 byte
deshalb ists ne sock

Dachte ich mir aber dennoch ist der Epg leer. Die xml Datei ist 23 MB groß, also sind ja Daten vorhanden. Nur werden diese nicht eingelesen.

Hab es mal laufen lassen, erste Zeit ist vor dem Speed-Boost:

--------------------------------------
easyepg Update begonnen um:
Sa 8. Jun 11:16:13 CEST 2019
easyepg Update beendet um:
Sa 8. Jun 11:35:41 CEST 2019
--------------------------------------
easyepg Update begonnen um:
Sa 8. Jun 15:34:22 CEST 2019
easyepg Update beendet um:
Sa 8. Jun 15:41:52 CEST 2019
--------------------------------------

Fortschritt geht nicht, der Cursor bleibt links stehen. Packet ist installiert (Debian):

tput -h
tput: invalid option -- 'h'
Usage: tput [options] [command]


Options:
  -S <<       read commands from standard input
  -T TERM     use this instead of $TERM
  -V          print curses-version
  -x          do not try to clear scrollback


Commands:
  clear       clear the screen
  init        initialize the terminal
  reset       reinitialize the terminal
  capname     unlike clear/init/reset, print value for capability "capname"

Zitat von DeBaschdi

sock einlesen ---> in tvh interne grabber neustarten ---> nochmal den sock einlesen --> channels dem epg zuweisen ?

aus mir nicht nachvollziehbaren gründen ist der Epg plötzlich da. Keine Ahnung wieso das beim ersten einlesen nicht geklappt hat.
Warum muss der cron zweimal ausgeführt werden? Was stimmt bei einmaligen übergeben an Tvh nicht?

Zitat von DesasterMaster

Warum muss der cron zweimal ausgeführt werden? Was stimmt bei einmaligen übergeben an Tvh nicht?

Zitat von Entwickler

Setup to update the EPG twice (recommended to update the EPG schedule times correcty)

Eine Sicherung, damit auch wirklich alle Daten eingelesen werden
Log von TVheadend

Zitat von DeBaschdi

Wenn das noch der ein oder andere testen mag, wäre toll. vllt auch mal ein "schwaches" system, dann würde ich das ins git schaufeln

habs mit nem nuc7cjyh (8gb ram) getestet, also intel 4005.
hab peaks von max 60%, meist sind die imdbtasks insgesamt aber unter 20%.
der balken wird bei mir von anfang an als "voll" dargestellt.
geschwindigkeit hat sich bei mir auch nochmals deutlich verbessert

uniq

hab ich auch ...

So, hab bei meinem Docker Container auch noch 2 Probleme beseitigt:

- Gruppe/User anlegen failte manchmal
- easyepg Update aus dem git failte manchmal

Ich werd's heute Nacht bei mir Mal als cronjob laufen lassen und schauen ob alles glatt läuft.