+ Antworten
Seite 1 von 17 1 2 3 11 ... LetzteLetzte
Ergebnis 1 bis 10 von 163
  1. #1
    Registriert seit
    Feb 2017
    Beiträge
    2,188

    Standard Archivumbau zur 5.5

    Zur 5.5 steht ein großer Umbau im Archiv an. Als erster Schritt haben wir einiges umstrukturiert und überarbeitet. Hiervon sollten für die Verwendung erst einmal nur Kleinigkeiten sichtbar sein. Wir waren aktuell insbesondere im Unterbau aktiv waren, werden aber zeitnah mit coolen neuen Features weitermachen.

    Bevor ihr dies ausprobiert, hätten wir eine Bitte an euch:
    - Macht bitte VOR dem Update vom 10.09. mal eine vollständige Reaggregation und messt die Dauer.
    - Macht NACH dem Update eine weitere Reaggregation und messt die Dauer
    - Postet eure Ergebnisse

    Ansonsten seid ihr ja wahrscheinlich trotzdem neugierig, was die "sichtbaren Kleinigkeiten" sind:
    - Die Aggregationen werden nicht mehr im Arbeitsspeicher gehalten, sondern bei Bedarf aus der Datei gelesen. Dies sollte den Arbeitsspeicherverbrauch von IP-Symcon signifikant senken.
    - Wird das Logging einer Variablen erstmals aktiviert, wird auch direkt der aktuelle Wert geloggt. Dies ist beispielsweise toll, wenn ihr euren Zähler, der noch auf 0 steht anfangt zu loggen und dann auch tatsächlich diese 0 als Referenzwert für zukünftige Delta verwendet wird.
    - Die Aggregationsdaten einer Zählervariable beginnen direkt beim ersten geloggten Wert, auch wenn der aggregierte Wert bis zum zweiten Rohwert natürlich 0 ist, da es ja noch keine positiven Deltas gibt.
    - Das Archiv findet nun auch Aggregationsdaten ohne Rohdaten (also beispielsweise eine einzelne <VariablenID>.year.csv) und zeigt diese mit 0 Werten im Archiv an. Beim Aufräumen werden diese dann auch gelöscht.
    - Intern wird die Info über Datensätze und -größe pro Monat abgespeichert, ihr findet neue <VariablenID>.statistics.csv-Dateien im db-Ordner. Das lässt uns einige Operationen optimieren. Diese Dateien werden beim ersten Start generiert, wodurch dieser einmalig ein bisschen länger dauern kann.


    Der erste Start mit der neuen Version kann übrigens ein wenig länger dauern, siehe oben
    Geändert von Dr. Niels (11.09.20 um 09:25 Uhr)

  2. #2
    Registriert seit
    Aug 2016
    Beiträge
    4,176

    Vor dem Update: ca. 2 Minuten und 8 Sekunden
    Nach dem Update: 1 Minute und 56 Sekunden

    Grüße,
    Kai
    IPS 5.2, auf Tinkerboard und RPI, piVCCU, Homematic & Homematic IP, diverse Tasmota Geräte, Shelly, GHoma, LG HomBot, Sonos, Tvheadend, HomeKit, AppleTV
    Einfach mal rein schauen: IP-Symcon Discord Channel

  3. #3
    Registriert seit
    May 2006
    Ort
    Hannover
    Beiträge
    3,570

    Daten seit knapp über 10 Jahren, knapp 63 Millionen Datensätze, ca. 1.05 GB

    Vor Update 16 Minuten
    Nach Update 15 Minuten

    Vor dem Update und nach der Reaggregation war kurzzeitig ein großer Teil meines Swap frei, der wurde innerhalb von 30 Minuten, inkl. einem Stundenwechsel, wieder benutzt.

    Nach dem Update verwendet symcon nach über einer Stunde Laufzeit und einem Stundenwechsel überhaupt keinen Swap mehr.
    MfG Ralf

  4. #4
    Registriert seit
    Aug 2009
    Ort
    Lippe
    Beiträge
    2,562

    vorher :4:58 Minuten
    nachher : 5:30 Minuten

    IPS läuft auf TinkerboardS.
    Archiv 312 Var's, 1.45 GB
    lg Thomas
    IPS Raspberry Pi2(3) mit LCN, HM, Sonoff+Shelly per MQTT, SONOS und viel Eigenbau + Pi2(3) mit Heizungssteuerung über GPIO per IPS

  5. #5
    Registriert seit
    Feb 2009
    Ort
    Berlin / Melsungen
    Beiträge
    833

    System: RPI4 / 4GB

    Vorher: 00:54,29
    Nachher: 01:18,37

    Neustart: Keine Verzögerung feststellbar.

    Gruß

    Burkhard
    OMV 5.5 (Usul - NAS auf Odroid N2), HM-HMIP (115 Aktoren) über piVCCU3, Symcon auf Raspi3, Wandpanels (Win10&Android), IPSView, Harmony Hub, Fritzbox, Hue, KODI auf Odroid C2, Sainlogic Wetter

  6. #6
    Registriert seit
    Oct 2012
    Beiträge
    368

    Raspberry Pi 2

    Vorher: 21.05
    Nachher: 16.89

    Variablen: 55
    Datensätze: 349495
    Größe: 5.19 MB

  7. #7
    Registriert seit
    Oct 2017
    Beiträge
    576

    Moin,

    wenn Ihr am Archiv dran seit, darf man ein Wunsch äußern?
    Und zwar wäre es schön bestimmte Variablen so einstellen zu können das diese 2 Wochen nur geloggt werden, was älter ist soll verfallen.

    Dauer natürlich einstellbar, wäre das vielleicht möglich um zu setzen?

    Gruß
    IPS Professional meist aktuellste stable. Auf einen Qnap / Docker.
    Tasmota, MQTT, Sonoff etc.

  8. #8
    Registriert seit
    Nov 2009
    Ort
    Essen
    Beiträge
    2,595

    Zitat Zitat von power dodge Beitrag anzeigen
    Und zwar wäre es schön bestimmte Variablen so einstellen zu können das diese 2 Wochen nur geloggt werden, was älter ist soll
    Lässt sich doch einfach mit https://www.symcon.de/service/dokume...evariabledata/ realisieren.
    Deutschlandweite Dienstleistungen rund um und mit IP-Symcon. Systemintegrator im Bereich KNX. ekey Partner. Infos unter https://schrader-it.net

  9. #9
    Registriert seit
    Feb 2017
    Beiträge
    2,188

    Der aktuelle Umbau ist nur ein Vortakt auf viele spannende neue Features des Archiv Auch Life Cycle Optionen sind geplant, auch wenn diese wohl nicht mehr zur 5.5 kommen. Damit soll man dann einstellen können, dass beispielsweise ältere Rohdaten ausgedünnt werden und so für Werte die älter als ein Jahr sind, nur noch ein Durchschnittswert pro Tag gespeichert wird anstatt alle Rohdaten von damals. Als letzte Stufe kann man dann sicherlich auch sagen, dass die Daten komplett gelöscht werden.

  10. #10
    Registriert seit
    Sep 2008
    Ort
    Staufenberg nr KS
    Beiträge
    2,085

    System: Win7pro / 4GB

    Vorher: 00:55,30
    Nachher: 01:06,00

    Variablen: 100
    Datensätze: 13748578
    Größe: 251,41 MB

    Neustart: Komplette Reaggregation durchgeführt

    Gruß Axel
    IP-Symcon Version: 5.5 ninja - unlim auf WIN7pro
    server:Shuttle XS35V4,HPSlate21,IPS-868,HM,HMip,FS20,piVCCU3,IPcams, FB 7590, TM-D710GE(GPS), Raspi3, Pioneer VSX, Libratone, MieleWCR870WPS, SamsungNZ64N7777

Ähnliche Themen

  1. Frage zur Beschattung
    Von Alex0815 im Forum IPSStudio & IPSView
    Antworten: 4
    Letzter Beitrag: 29.02.16, 21:52
  2. Antworten: 2
    Letzter Beitrag: 17.03.14, 23:36
  3. Frage zur IPhone AP
    Von pinki99 im Forum Mobile (iOS/Android)
    Antworten: 7
    Letzter Beitrag: 10.01.11, 03:09
  4. Zur Lizenzmodellüberarbeitung
    Von Smudo im Forum Allgemeine Diskussion (2.x/3.x)
    Antworten: 11
    Letzter Beitrag: 02.08.10, 11:33
  5. Frage zur Registervariable
    Von Jannis im Forum Allgemeine Diskussion (2.x/3.x)
    Antworten: 4
    Letzter Beitrag: 29.05.09, 13:41