Python: letzten Wert aus Logdatei lesen

Chr. M. (snowfly) OP 26.11.2017 21:35 #5223937

Lesenswert?

•

Hallo Forum,

beim basteln an meinem SmartHome bin ich gerade auf ein Problem
gestossen bei dem ich nicht weiterkomme.

Vielleicht könnt ihr mir weiterhelfen.

Ich will Daten von meinem Solarlogger in OpenHab bekommen,
jetzt bin ich schon soweit dass ich ein Python Script habe
das diverse Daten sendet.

In dieses Pyton Script möchte ich nun eine "Funktion" einfügen
die den letzten Wert aus einer .csv Datei ausliest und als
String Variable zurückgibt.

zu erweiternder code:

def solar(value):
....[letzter_Wert = letzter Wert von /home/pi/logfile$YEAR.csv]  
return str(letzter_Wert)

logfile2017.csv:

1	`20171121,11.069`
2	`20171122,22.09`
3	`20171123,19.438`
4	`20171125,1.523`


in letzter_Wert sollte dann 1.523 stehen.(oder besser 1523)

Leider bin ich bei meinen Versuchen kein Stück weitergekommen,
meine Versuche mir was zusammenzubastel endeten alle in einem
fehlererzeugenden c, bash, pythom Mix :(

Noch dazu kommt das die Logdatei jedes Jahr einen andern Namen hat.

Antwort Zitieren Bearbeiten Thread verschieben Thread sperren Anmeldepflicht aktivieren Anpinnen Thread löschen Thread mit anderem zusammenführen Beitrag melden

Soeren K. (srkeingast) 26.11.2017 21:52 #5223967

Lesenswert?

•

▲
▼

Ungetestet vom Smartphone:

import csv
with open('datei.csv', 'rb') as csvfile:
    reader = csv.reader(csvfile, delimiter=',')
    for row in reader:
        pass
print row[1]


Das ist ineffizient und durchläuft die ganze Datei, aber für dich sicher 
am ehesten nachvollziehbar.

Edit// nun getestet und gibt 2. Spalte zurück

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Kaj G. (bloody) (Firma: RUB) 26.11.2017 22:16 #5223995

Lesenswert?

•

▲
▼

#!/usr/bin/env python
def solar():
    csv_path = 'solar.csv'
    csv_file = open(csv_path, 'r')
    csv_data = csv_file.read()
    csv_file.close()
    csv_data = csv_data.splitlines()
    csv_last_value = csv_data[-1].split(',')[1]
    csv_last_value = csv_last_value.replace('.', '')
    return csv_last_value
def main():
    last_value = solar()
    print('Last Value is: {}'.format(last_value))
if __name__ == '__main__':
    main()

1	`Last Value is: 1523`

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Chr. M. (snowfly) OP 26.11.2017 22:20 #5223999

Lesenswert?

•

▲
▼

Erstmal Danke für die Hilfe!

Ich habe zum testen ein Script erstellt,
aber es fängt schon so an:

pi@SMApi:~/scripts $ cat ./testlast.py
#!/usr/bin/python
import csv
with open('/home/pi/scripts/energy2017.csv', 'rb') as csvfile:
    reader = csv.reader(csvfile, delimiter=',')
        for row in reader:
            pass
print row
pi@SMApi:~/scripts $ ./testlast.py
  File "./testlast.py", line 6
    for row in reader:
IndentationError: unexpected indent
pi@SMApi:~/scripts $


leider habe ich von Python wirklich gar keine Ahnung...

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Soeren K. (srkeingast) 26.11.2017 22:29 #5224006

Lesenswert?

•

▲
▼

Hi, das war mein Fehler, nimm mal das editierte Skript, die Zeile for 
row in Reader und die danach müssen jeweils weiter nach links.

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Chr. M. (snowfly) OP 26.11.2017 23:16 #5224061

Lesenswert?

•

▲
▼

vielen Dank euch beiden.

Mit dem Script von Kaj solle ich es hinbekommen.

Standalone läuft es jetzt muss ich es nur noch passen
hineinbasteln..

und das mit dem Jahr hinbekommen.

hibt es eine verfügbare Varaiable die das aktuelle
Jahr(4stellig) beinhaltet?

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Chr. M. (snowfly) OP 27.11.2017 00:08 #5224101

Lesenswert?

•

▲
▼

leider bekomme ich es auch so nicht ans laufen...

Sobald ich meine Änderung einfüge und es vom Hauptscript
angesprochen wird gibt es Fehler.

Das ganze (unter)Script sieht gerade so aus:

def kb(value):
    csv_path = '/var/www/html/123solar/data/invt1/production/energy2017.csv'
    csv_file = open(csv_path, 'r')
    csv_data = csv_file.read()
    csv_file.close()
    csv_data = csv_data.splitlines()
    csv_last_value = csv_data[-1].split(',')[1]
    csv_last_value = csv_last_value.replace('.', '')
   return str(csv_last_value)
#def kb(value):
#    return str(value / 1024) + " KB"
def mb(value):
    return str(value / 1024 / 1024) + " MB"
def gb(value):
    return str(value / 1024 / 1024 / 1024) + " GB"
def uptime(boot_time):
    import time
    upt = time.time() - boot_time
    retval = ""
    days = int(upt / (60 * 60 * 24))
    if days != 0:
        retval += str(days) + " " + ("days" if days > 1 else "day") + ", "
    minutes = int(upt / 60)
    hours = int(minutes / 60)
    hours %= 24
    minutes %= 60
    if hours != 0:
        retval += str(hours) + ":" + (str(minutes) if minutes >= 10 else "0" + str(minutes))
    else:
        retval += str(minutes) + " min"
    return retval
def register_filters(env):
    env.filters['KB'] = kb
    env.filters['MB'] = mb
    env.filters['GB'] = gb
    env.filters['uptime'] = uptime


Die Fehler sehen so aus:

ERROR:root:disk_usage/free/|/{{x|GB}}: unindent does not match any outer indentation level (filters.py, line 10)
Traceback (most recent call last):
  File "./psmqtt.py", line 57, in run_task
    payload = get_value(task)
  File "./psmqtt.py", line 84, in get_value
    value = Formatter.format(_format, value)
  File "/home/pi/scripts/psmqtt/format.py", line 15, in format
    env = cls.get_environment()
  File "/home/pi/scripts/psmqtt/format.py", line 22, in get_environment
    import filters
  File "/home/pi/scripts/psmqtt/filters.py", line 10
    return str(csv_last_value)
IndentationError: unindent does not match any outer indentation level


Habt ihr noch einen Tip was ich übersehe?

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Kaj G. (bloody) (Firma: RUB) 27.11.2017 00:26 #5224114

Lesenswert?

•

▲
▼

Chr. M. schrieb:
> Habt ihr noch einen Tip was ich übersehe?
Die eine Zeile ist falsch eingerueckt

1	`return str(csv_last_value)`

Den Cast str() kannst du weglassen. Der Wert ist schon ein String.

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Chr. M. (snowfly) OP 27.11.2017 00:57 #5224126

Lesenswert?

•

▲
▼

So,
ich habe es hinbekommen...

so läuft es:

    retval = ""
    csv_path = '/var/www/html/123solar/data/invt1/production/energy2017.csv'
    csv_file = open(csv_path, 'r')
    csv_data = csv_file.read()
    csv_file.close()
    csv_data = csv_data.splitlines()
    csv_last_value = csv_data[-1].split(',')[1]
    csv_last_value = csv_last_value.replace('.', '')
    retval += str(csv_last_value)
    return retval


wenn in Python wichtig ist wohin die Zeilen eingerückt
sind dann wundert mich heute nichts mehr...

Danke und N8

Antwort Zitieren Bearbeiten Löschen Beitrag melden

(º°)·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.· Gast 27.11.2017 10:32 #5224391

Lesenswert?

•

▲
▼

Ist dir das nicht peinlich?
Statt des unbekuemmerten Herumexperimentierens empfiehlt sich
mal der Blick ins Buch:

Learning Python von Mark Lutz

Und spaeter dann:

PYTHON IN A NUTSHELL von Alex Martelli

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Dirk B. (dirkb2) 27.11.2017 12:55 #5224535

Lesenswert?

•

▲
▼

Chr. M. schrieb:
> wenn in Python wichtig ist wohin die Zeilen eingerückt
> sind dann wundert mich heute nichts mehr...

In Wikipedia heißt es im letzten Satz im ersten Absatz  über Python:
> So werden beispielsweise Blöcke nicht durch geschweifte Klammern, sondern
> durch Einrückungen strukturiert.

Überraschung!

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Thomas S. (doschi_) 27.11.2017 14:48 #5224689

Lesenswert?

•

▲
▼

Wenn Du nur die letzte zeile benötigst, wäre das
(bash-)Kommando 'tail' auch noch einen Blick wert.

tail -n 1 logfile2017.csv

Dann muss das Python-Script nicht die ganze Datei durchlaufen.
Mit

tail -n 1 logfile2017.csv | cut -d, -f2

 hast Du dann das 2.Feld

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Chr. M. (snowfly) OP 27.11.2017 15:23 #5224745

Lesenswert?

•

▲
▼

(º°)·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.· schrieb im Beitrag 
#5224391:
> Ist dir das nicht peinlich?

Abgesehen von dem fremdschämen über deinen Post
ist mir hier nichts peinlich.

> empfiehlt sich mal der Blick ins Buch:

NaKlar, mach ich.
Gleich nachdem ich alle Bücher zu
Linux, php, html, c, c++, WLAN, Bluetooth, Ethernet,
x86, ARM, USB, MQTT, verschiedene Datenbanken und all
ihrer implementierungen und Protokolle auswendig kann,
werde also vorraussichtlich in 2 Wochen damit anfangen ;)

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Chr. M. (snowfly) OP 27.11.2017 15:54 #5224782

Lesenswert?

•

▲
▼

Thomas S. schrieb:
> Wenn Du nur die letzte zeile benötigst, wäre das
> (bash-)Kommando 'tail' auch noch einen Blick wert.

tail war auch mein erster Gedanke aber es hat einfach nicht
funktioniert (und inzwischen weiß ich auch warum)
danach habe ich nach verscheidenen Beispielen gesucht
und irgendwie hatten alle einen anderen Ansatz wovon
keiner auch nur annähernd funktioniert hat.

Die Fehlermeldungen waren auch immer völlig unpassend
und so dachte ich mir 'frag mal im Forum', was Dank
netter Leute wie Kaj auch funktioniert hat.
(von all den Beispielen die ich gefunden habe
war das auch die beste Lösung)

Meine Absicht war nicht eine Ausbildung in Python
zu machen sondern ein funktionierendes Gerät.
Das ich jetzt auch um die Besonderheiten von Python
weiß ist ein Nebeneffekt.

Antwort Zitieren Bearbeiten Löschen Beitrag melden

Python: letzten Wert aus Logdatei lesen

Antwort schreiben