Hilfe beim Skript

[Skriptanfänger (Gast)]

Hallo,
ich bräuchte Hilfe bei einem Bash-Skript. Ich mach seit 2 Tagen dranrum 
un komme nicht vorwärts..



Ich habe einen Ordner in dem mehrere Dateien abliegen. Jede einzelne 
Datei hat folgenden Aufbau:

{
  "enabled": true,
  "start": 1493842500,
  "start_extra": 0,
  "stop": 1493844300,
  "stop_extra": 0,
  "channel": "d3751afe7fb68fb4a19fb1d482b52787",
  "channelname": "Das Erste HD",
  "title": {
    "ger": "Tagesthemen"
  },
  "subtitle": {
    "ger": "mit Wetter"
  },
  "description": {
    "ger": "Themen u.a.:\n* Vor der Wahl: TV-Duell in Frankreich\n* Unter Druck: Eingeschüchterte Journalisten\n* Auf der Hut: Cybercrime bedroht Deutschland\n* Kommentar von Thomas Baumann (MDR) zum Tag der Pressefreiheit\n\nModeration: Caren Miosga\nProduziert in H"
  },
  "pri": 2,
  "retention": 2147483646,
  "removal": 92,
  "playposition": 0,
  "playcount": 0,
  "config_name": "8d0f5b7ae354d956d7fe5db25f5d0d24",
  "owner": "kodi",
  "creator": "kodi",
  "errorcode": 103,
  "errors": 1,
  "data_errors": 0,
  "dvb_eid": 22433,
  "noresched": false,
  "norerecord": false,
  "fileremoved": 0,
  "autorec": "",
  "timerec": "",
  "parent": "",
  "child": "",
  "content_type": 2,
  "broadcast": 37561,
  "files": [
    {
      "filename": "/storage/recordings/Tagesthemen/Tagesthemen-Das Erste HD2017-05-0322-15.ts",
      "info": [
        {
          "type": "H264",
          "width": 1280,
          "height": 720,
          "duration": 1800,
          "aspect_num": 0,
          "aspect_den": 0
        },
        {
          "type": "MPEG2AUDIO",
          "language": "ger",
          "audio_type": 0
        },
        {
          "type": "MPEG2AUDIO",
          "language": "mis",
          "audio_type": 0
        },
        {
          "type": "AC3",
          "language": "ger",
          "audio_type": 0
        },
        {
          "type": "TELETEXT"
        },
        {
          "type": "DVBSUB",
          "language": "ger",
          "composition_id": 1,
          "ancillary_id": 1
        }
      ],
      "start": 1493842500,
      "stop": 1493844164
    }
  ]
}

Mich interessiert dabei die Felder "start" und "stop". Hier sind die 
Startzeiten bzw. Stoppzeiten der Aufnahme gespeichert. Nun möchte ich 
jede einzelne Datei durchsuchen und schauen welches der nächste 
Startzeitpunkt vom aktuellen Zeitpunkt ist und in dem Format " 
YYMMDDhhmmss" ausgeben, zusätzlich soll die stoppzeit zu der zugehörigen 
Startzeit auch ausgegeben werden.

Kann mir jmd helfen?

Danke

[Rufus Τ. F. (rufus)]

Das sieht aus wie json.

Dafür sollte das hier helfen:

https://github.com/dominictarr/JSON.sh

[J. F. (Firma: Père Lachaise) (rect)]

Alternativ: nimm ein Python Skript:

import json
[...]

Und du bist glücklich :-)

[Urmel (Gast)]

Nochne Möglichkeit: https://stedolan.github.io/jq/

jq '{ start: .start, stop: .stop }' daten.json

 (osä)

[Skriptanfänger (Gast)]

Derzeit mache ich es so

"tmp_start=`cat $i | grep '"start":' | cut -f 2 -d " " | cut -f 1 -d 
","`" sobald ich temp_start weiterverarbeiten will kommt immer Bad 
number in der Konsole.. Was mache ich falsch?

[Der kein Bock mehr A. (Gast)]

Hi, nee, der Tipp oben mit dem JSON ist schon gut. Parse das als 
JSON-Objekt, dann hast Du direkten Zugriff auf die Felder.
Bist Du auf bash angewiesen, oder könntest Du das auf ner 
Windows-Maschine mit Powershell machen ? Da gibts JSON-Parser quasi 
eingebaut.

Ansonsten Python, auch gut.

LG

[Kommandozeile vor dem Frühstück für Alle! (Gast)]

Skriptanfänger schrieb:
> Derzeit mache ich es so
>
> "tmp_start=`cat $i | grep '"start":' | cut -f 2 -d " " | cut -f 1 -d
> ","`" sobald ich temp_start weiterverarbeiten will kommt immer Bad
> number in der Konsole.. Was mache ich falsch?

Nicht direkt falsch, aber 3 Werkzeuge und 4 Aufrufe: etwas viel wenn 
eines davon 1x aufgerufen reicht. Das bringt dich direkt in die /Shell 
quoting hell/ .

Ungetestet aus dem Verdauungsdämmerzustand:

tmp_Start=$( grep -oP '(?<="start":)[0-9]+'  "${i}" )
tmp_Stop=$( grep -oP '(?<="stop":)[0-9]+'  "${i}" )

Die Wege über eine JSON library, insbesondere via Python, sind definitiv 
besser/sauberer.

Ist garantiert dass start¦stop IMMER kleingeschrieben sind?

[Kommandozeile vor dem Frühstück für Alle! (Gast)]

> Windows-Maschine mit Powershell

Igitt! POSIX resp. GNU Werkzeuge und auch Python sind definitiv 
portabler als PoSh=ProprietaryShit

[Skriptanfänger (Gast)]

Das Problem ist mein System läuft libreelec deswegen bin ich von der 
Vielfalt her eingeschränkt........ Ich kann keine zusätzlichen Pakete 
z.b. installieren etc. Daher mein Ansatz über die Grundfunktionen ;)

[Helmut H. (helmuth)]

Skriptanfänger schrieb:
> ich kann keine zusätzlichen Pakete z.b. installieren

Python ist ziemlich sicher schon da, z.B. auf dem Raspi mit:

osmc@osmc:~$ python
Python 2.7.9 (default, Aug 13 2016, 17:56:53)
[GCC 4.9.2] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> import json
>>>

[Skriptanfänger (Gast)]

Ja Start ist immer kleingeschrieben @Kommandozeile vor dem Frühstück für 
Alle!  Ich probiere mal deinen Ansatz

[Der kein Bock mehr A. (Gast)]

Kommandozeile vor dem Frühstück für Alle! schrieb:
>> Windows-Maschine mit Powershell
>
> Igitt! POSIX resp. GNU Werkzeuge und auch Python sind definitiv
> portabler als PoSh=ProprietaryShit

Ach stell disch net so oo Bub ... wenn eh grad ne Win-Möhre da ist, 
reicht für sowas das bissi Posh allemal :-P nicht immer soviel 
Berührungsängste haben, Kinners ;-)

Aber erst bei genaueren betrachten des Inhalts sinds wohl eh 
Programminfos von KODI wahrscheinlich auf nem RasPi, von daher klar : 
Wenn schon ne X-oide Maschine da ist, dann natürlich auch mit 
Bordmitteln.

Alles gut

[Md M. (Firma: Potilatormanufaktur) (mdma)]

Skriptanfänger schrieb:
> Derzeit mache ich es so
>
> "tmp_start=`cat $i | grep '"start":' | cut -f 2 -d " " | cut -f 1 -d
> ","`" sobald ich temp_start weiterverarbeiten will kommt immer Bad
> number in der Konsole.. Was mache ich falsch?

Nach dem ersten cut kommt schon nix mehr raus. Mit deinem grep 
bekommst du zwei lines ausgespuckt. Diese unterscheiden sich nur in der 
Anzahl der führenden Leerzeichen. Damit kannst du die unterscheiden, 
falls die Unterscheidung überhaupt wichtig ist. Wenn beide Werte immer 
gleich sind, kannst du auch einfach head -n1 oder tail -n1 oder 
unique oder sowas benutzen. Den Kram um den eigentlichen Wert herum 
bekommst du mit sed weg. Das ist aber insgesamt wie schon erwähnt die 
unsaubere Lösung. Das JSON benutzen wie es gedacht ist ist besser. Haste 
denn jetzt python zur Verfügung? Und Module?

cat file.json | python -c 'import json,sys;obj=json.load(sys.stdin);print obj["start"];'

[Skriptanfänger (Gast)]

Also bei

tmp_Start=$( grep -oP '(?<="start":)[0-9]+'  "${i}" )

kommt bei mir

grep: invalid option -- 'P'

[Daniel A. (daniel-a)]

Bei einigen unixoiden, wie z.B. busybox, ist eine reduzierte version von 
grep enthalten die keine Perl/Extended syntax unterstützung. Versuche 
mal:

grep -o '"start": [0-9]*' "$i" | head -n 1 | grep -o '[0-9]*'

[Md M. (Firma: Potilatormanufaktur) (mdma)]

Skriptanfänger schrieb:
> grep: invalid option -- 'P'

Hm.

"-P, --perl-regexp         PATTERN is a Perl regular expression".

Eine deiner Einschränkungen vielleicht?

Hier noch eine dreckige Lösung

cat file.json | grep start | head -n1 | sed 's/^ *\"start\": *//;s/,.*//' | date +%Y%m%d%H%M%S

[Skriptanfänger (Gast)]

hier mein Skript:

#!/bin/sh
cd /storage/.kodi/userdata/addon_data/service.tvheadend42/dvr/log/

for i in $( ls ); do
            tmp_Start=grep -o '"start": [0-9]*' "$i" | head -n 1 | grep -o '[0-9]*'
done

nun kommt

./test3.sh: line 6: -o: not found

[Daniel A. (daniel-a)]

tmp_Start="$(grep -o '"start": [0-9]*' "$i" | head -n 1 | grep -o '[0-9]*')"

[Sheeva P. (sheevaplug)]

Daniel A. schrieb:
>

> tmp_Start="$(grep -o '"start": [0-9]*' "$i" | head -n 1 | grep -o 
> '[0-9]*')"
>

Clever! Da steuer' ich auch mal zwei Python-Lösungen bei -- als 
Shell-Oneliner:

cd /storage/.kodi/userdata/addon_data/service.tvheadend42/dvr/log/
for i in *; do
  tmp_start=$(python -c 'import json, sys; 
    c = json.loads(sys.stdin.read());
    print c["start"], c["stop"]' < $i);
done

Oder direkt als Skript:

#!/usr/bin/python
import json, sys, os
os.chdir('/storage/.kodi/userdata/addon_data/service.tvheadend42/dvr/log/')
for fn in os.listdir("."):
  with open(fn, 'r') as ifh:
    c = json.loads(ifh.read())
    print fn, c['start'], c['stop']