Python: letzten Wert aus Logdatei lesen

[Chr. M. (snowfly)]

Hallo Forum,

beim basteln an meinem SmartHome bin ich gerade auf ein Problem
gestossen bei dem ich nicht weiterkomme.

Vielleicht könnt ihr mir weiterhelfen.

Ich will Daten von meinem Solarlogger in OpenHab bekommen,
jetzt bin ich schon soweit dass ich ein Python Script habe
das diverse Daten sendet.

In dieses Pyton Script möchte ich nun eine "Funktion" einfügen
die den letzten Wert aus einer .csv Datei ausliest und als
String Variable zurückgibt.

zu erweiternder code:

def solar(value):
....[letzter_Wert = letzter Wert von /home/pi/logfile$YEAR.csv]  
return str(letzter_Wert)

logfile2017.csv:

20171121,11.069
20171122,22.09
20171123,19.438
20171125,1.523

in letzter_Wert sollte dann 1.523 stehen.(oder besser 1523)

Leider bin ich bei meinen Versuchen kein Stück weitergekommen,
meine Versuche mir was zusammenzubastel endeten alle in einem
fehlererzeugenden c, bash, pythom Mix :(

Noch dazu kommt das die Logdatei jedes Jahr einen andern Namen hat.

[Soeren K. (srkeingast)]

Ungetestet vom Smartphone:

import csv
with open('datei.csv', 'rb') as csvfile:
    reader = csv.reader(csvfile, delimiter=',')
    for row in reader:
        pass
print row[1]

Das ist ineffizient und durchläuft die ganze Datei, aber für dich sicher 
am ehesten nachvollziehbar.

Edit// nun getestet und gibt 2. Spalte zurück

[Kaj G. (Firma: RUB) (bloody)]

#!/usr/bin/env python


def solar():
    csv_path = 'solar.csv'
    csv_file = open(csv_path, 'r')
    csv_data = csv_file.read()
    csv_file.close()

    csv_data = csv_data.splitlines()
    csv_last_value = csv_data[-1].split(',')[1]
    csv_last_value = csv_last_value.replace('.', '')

    return csv_last_value


def main():
    last_value = solar()
    print('Last Value is: {}'.format(last_value))


if __name__ == '__main__':
    main()

Last Value is: 1523

[Chr. M. (snowfly)]

Erstmal Danke für die Hilfe!

Ich habe zum testen ein Script erstellt,
aber es fängt schon so an:

pi@SMApi:~/scripts $ cat ./testlast.py
#!/usr/bin/python

import csv
with open('/home/pi/scripts/energy2017.csv', 'rb') as csvfile:
    reader = csv.reader(csvfile, delimiter=',')
        for row in reader:
            pass
print row
pi@SMApi:~/scripts $ ./testlast.py
  File "./testlast.py", line 6
    for row in reader:
    ^
IndentationError: unexpected indent
pi@SMApi:~/scripts $

leider habe ich von Python wirklich gar keine Ahnung...

[Soeren K. (srkeingast)]

Hi, das war mein Fehler, nimm mal das editierte Skript, die Zeile for 
row in Reader und die danach müssen jeweils weiter nach links.

[Chr. M. (snowfly)]

vielen Dank euch beiden.

Mit dem Script von Kaj solle ich es hinbekommen.

Standalone läuft es jetzt muss ich es nur noch passen
hineinbasteln..

und das mit dem Jahr hinbekommen.

hibt es eine verfügbare Varaiable die das aktuelle
Jahr(4stellig) beinhaltet?

[Chr. M. (snowfly)]

leider bekomme ich es auch so nicht ans laufen...

Sobald ich meine Änderung einfüge und es vom Hauptscript
angesprochen wird gibt es Fehler.

Das ganze (unter)Script sieht gerade so aus:

def kb(value):
    csv_path = '/var/www/html/123solar/data/invt1/production/energy2017.csv'
    csv_file = open(csv_path, 'r')
    csv_data = csv_file.read()
    csv_file.close()

    csv_data = csv_data.splitlines()
    csv_last_value = csv_data[-1].split(',')[1]
    csv_last_value = csv_last_value.replace('.', '')
   return str(csv_last_value)


#def kb(value):
#    return str(value / 1024) + " KB"


def mb(value):
    return str(value / 1024 / 1024) + " MB"


def gb(value):
    return str(value / 1024 / 1024 / 1024) + " GB"


def uptime(boot_time):
    import time
    upt = time.time() - boot_time

    retval = ""
    days = int(upt / (60 * 60 * 24))

    if days != 0:
        retval += str(days) + " " + ("days" if days > 1 else "day") + ", "

    minutes = int(upt / 60)
    hours = int(minutes / 60)
    hours %= 24
    minutes %= 60

    if hours != 0:
        retval += str(hours) + ":" + (str(minutes) if minutes >= 10 else "0" + str(minutes))
    else:
        retval += str(minutes) + " min"

    return retval




def register_filters(env):
    env.filters['KB'] = kb
    env.filters['MB'] = mb
    env.filters['GB'] = gb
    env.filters['uptime'] = uptime

Die Fehler sehen so aus:

ERROR:root:disk_usage/free/|/{{x|GB}}: unindent does not match any outer indentation level (filters.py, line 10)
Traceback (most recent call last):
  File "./psmqtt.py", line 57, in run_task
    payload = get_value(task)
  File "./psmqtt.py", line 84, in get_value
    value = Formatter.format(_format, value)
  File "/home/pi/scripts/psmqtt/format.py", line 15, in format
    env = cls.get_environment()
  File "/home/pi/scripts/psmqtt/format.py", line 22, in get_environment
    import filters
  File "/home/pi/scripts/psmqtt/filters.py", line 10
    return str(csv_last_value)
                             ^
IndentationError: unindent does not match any outer indentation level

Habt ihr noch einen Tip was ich übersehe?

[Kaj G. (Firma: RUB) (bloody)]

Chr. M. schrieb:
> Habt ihr noch einen Tip was ich übersehe?
Die eine Zeile ist falsch eingerueckt

return str(csv_last_value)

Den Cast str() kannst du weglassen. Der Wert ist schon ein String.

[Chr. M. (snowfly)]

So,
ich habe es hinbekommen...

so läuft es:

    retval = ""
    csv_path = '/var/www/html/123solar/data/invt1/production/energy2017.csv'
    csv_file = open(csv_path, 'r')
    csv_data = csv_file.read()
    csv_file.close()

    csv_data = csv_data.splitlines()
    csv_last_value = csv_data[-1].split(',')[1]
    csv_last_value = csv_last_value.replace('.', '')

    retval += str(csv_last_value)

    return retval

wenn in Python wichtig ist wohin die Zeilen eingerückt
sind dann wundert mich heute nichts mehr...

Danke und N8

[(º°)·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.· (Gast)]

Ist dir das nicht peinlich?
Statt des unbekuemmerten Herumexperimentierens empfiehlt sich
mal der Blick ins Buch:

Learning Python von Mark Lutz

Und spaeter dann:

PYTHON IN A NUTSHELL von Alex Martelli

[Dirk B. (dirkb2)]

Chr. M. schrieb:
> wenn in Python wichtig ist wohin die Zeilen eingerückt
> sind dann wundert mich heute nichts mehr...

In Wikipedia heißt es im letzten Satz im ersten Absatz  über Python:
> So werden beispielsweise Blöcke nicht durch geschweifte Klammern, sondern
> durch Einrückungen strukturiert.

Überraschung!

[Thomas S. (doschi_)]

Wenn Du nur die letzte zeile benötigst, wäre das
(bash-)Kommando 'tail' auch noch einen Blick wert.

tail -n 1 logfile2017.csv

Dann muss das Python-Script nicht die ganze Datei durchlaufen.
Mit

tail -n 1 logfile2017.csv | cut -d, -f2

 hast Du dann das 2.Feld

[Chr. M. (snowfly)]

(º°)·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.·´¯`·.¸¸.· schrieb im Beitrag 
#5224391:
> Ist dir das nicht peinlich?

Abgesehen von dem fremdschämen über deinen Post
ist mir hier nichts peinlich.

> empfiehlt sich mal der Blick ins Buch:

NaKlar, mach ich.
Gleich nachdem ich alle Bücher zu
Linux, php, html, c, c++, WLAN, Bluetooth, Ethernet,
x86, ARM, USB, MQTT, verschiedene Datenbanken und all
ihrer implementierungen und Protokolle auswendig kann,
werde also vorraussichtlich in 2 Wochen damit anfangen ;)

[Chr. M. (snowfly)]

Thomas S. schrieb:
> Wenn Du nur die letzte zeile benötigst, wäre das
> (bash-)Kommando 'tail' auch noch einen Blick wert.

tail war auch mein erster Gedanke aber es hat einfach nicht
funktioniert (und inzwischen weiß ich auch warum)
danach habe ich nach verscheidenen Beispielen gesucht
und irgendwie hatten alle einen anderen Ansatz wovon
keiner auch nur annähernd funktioniert hat.

Die Fehlermeldungen waren auch immer völlig unpassend
und so dachte ich mir 'frag mal im Forum', was Dank
netter Leute wie Kaj auch funktioniert hat.
(von all den Beispielen die ich gefunden habe
war das auch die beste Lösung)

Meine Absicht war nicht eine Ausbildung in Python
zu machen sondern ein funktionierendes Gerät.
Das ich jetzt auch um die Besonderheiten von Python
weiß ist ein Nebeneffekt.