CCU-Historian: Ein Langzeitarchiv für die CCU
Moderator: Co-Administratoren
- Hoppla
- Beiträge: 341
- Registriert: 29.12.2018, 19:39
- System: Alternative CCU (auf Basis OCCU)
- Wohnort: Leipzsch
- Hat sich bedankt: 35 Mal
- Danksagung erhalten: 12 Mal
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Ja, der war gestoppt.
Ich hab das Trauerspiel beendet, weil er immer wieder die gleiche Datei angefasst hat.
inzwischen hab ich alles deinstalliert, die Verzeichnisse sind weg, der Speicherplatz allerdings immer noch. Auch die 500Gbyte der zuketzt aktuellen Datenbank sind nicht freigegeben.
Ich hab das Trauerspiel beendet, weil er immer wieder die gleiche Datei angefasst hat.
inzwischen hab ich alles deinstalliert, die Verzeichnisse sind weg, der Speicherplatz allerdings immer noch. Auch die 500Gbyte der zuketzt aktuellen Datenbank sind nicht freigegeben.
-
- Beiträge: 3734
- Registriert: 23.09.2017, 12:04
- Hat sich bedankt: 66 Mal
- Danksagung erhalten: 121 Mal
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Hallo
wenn Du ohnehin neu anfängst, oder Historian nicht weiter benutzen möchtest ...
- ioBroker auf einem RasPi
- eine SQL Datenbank auf der DS anlegen
- ioBroker die Datenpunkte vom Raspi direkt auf die SQL Datenbank der DS schreiben lassen
- sollte der RasPi dann mal SchluckAuf haben, bleibt die DB auf der DS erhalten
- die DS kann von der MariaDB10 automatische Backups machen
- ioBroker kann von sich selbst und von Der CCU3 automatische Backups in einen frei gegebenen SMB Ordner der DS machen
- die Diagramme von ioBroker sind sehr viel flexibler als die von Historian
- es gibt ein extra Forum für ioBroker
wenn Du ohnehin neu anfängst, oder Historian nicht weiter benutzen möchtest ...
- ioBroker auf einem RasPi
- eine SQL Datenbank auf der DS anlegen
- ioBroker die Datenpunkte vom Raspi direkt auf die SQL Datenbank der DS schreiben lassen
- sollte der RasPi dann mal SchluckAuf haben, bleibt die DB auf der DS erhalten
- die DS kann von der MariaDB10 automatische Backups machen
- ioBroker kann von sich selbst und von Der CCU3 automatische Backups in einen frei gegebenen SMB Ordner der DS machen
- die Diagramme von ioBroker sind sehr viel flexibler als die von Historian
- es gibt ein extra Forum für ioBroker
- Hoppla
- Beiträge: 341
- Registriert: 29.12.2018, 19:39
- System: Alternative CCU (auf Basis OCCU)
- Wohnort: Leipzsch
- Hat sich bedankt: 35 Mal
- Danksagung erhalten: 12 Mal
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Ibroker hab ich probiert, das ist nicht mein Ding.
Wie gesagt, ich nehme einen Raspi4, hänge eine Platte dran und überlasse dem die Historian.
Muss nur noch suchen, wie man den da einrichtet.
Wie gesagt, ich nehme einen Raspi4, hänge eine Platte dran und überlasse dem die Historian.
Muss nur noch suchen, wie man den da einrichtet.
-
- Beiträge: 1206
- Registriert: 03.02.2016, 14:44
- System: Alternative CCU (auf Basis OCCU)
- Wohnort: irgendwo aus Süd BaWü
- Hat sich bedankt: 142 Mal
- Danksagung erhalten: 85 Mal
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Welcher Aufwand ist es das Nas mit einem Backup der Daten neu einzurichten?
Andere betreiben ähnliche Installation in der Form und die DB ist nicht so aufgebläht!
Irgendwas scheint mir am Datenvolumen nicht zu stimmen. Das macht mich am meisten stutzig.
----------------------------------------------------------------------------------------
Raspi3B+ Bullseye mit HB-RF-ETH und RPI-RF-MOD auf piVCCU-FW 3.75.7 / Addons: CuxD v2.11 - E-Mail v1.7.6 - Patcher v1.0.0 - Philips Hue v3.2.5 - Programme drucken v2.6 - Scriptparser v1.11 - XML-API v2.3
Geräte: 141 / Kanäle: 791 / Datenpunkte: 6080 / SysVars: 275 / Programme: 161 / Regadom IDs: 14010 / 48 CUxD-Kanäle in 3 CUxD-Geräten
Intel NUC i3-5010U @ 2,1 GHz mit 16 GB RAM & 512 GB SSD für Proxmox mit ioBroker VM und CCU-Historian/InfluxDB/Grafana VM
----------------------------------------------------------------------------------------
Projekte im Forum: HomeHub v4.1 / Fritzbox-Anruferliste für HomeHub
----------------------------------------------------------------------------------------
Raspi3B+ Bullseye mit HB-RF-ETH und RPI-RF-MOD auf piVCCU-FW 3.75.7 / Addons: CuxD v2.11 - E-Mail v1.7.6 - Patcher v1.0.0 - Philips Hue v3.2.5 - Programme drucken v2.6 - Scriptparser v1.11 - XML-API v2.3
Geräte: 141 / Kanäle: 791 / Datenpunkte: 6080 / SysVars: 275 / Programme: 161 / Regadom IDs: 14010 / 48 CUxD-Kanäle in 3 CUxD-Geräten
Intel NUC i3-5010U @ 2,1 GHz mit 16 GB RAM & 512 GB SSD für Proxmox mit ioBroker VM und CCU-Historian/InfluxDB/Grafana VM
----------------------------------------------------------------------------------------
Projekte im Forum: HomeHub v4.1 / Fritzbox-Anruferliste für HomeHub
----------------------------------------------------------------------------------------
-
- Beiträge: 3734
- Registriert: 23.09.2017, 12:04
- Hat sich bedankt: 66 Mal
- Danksagung erhalten: 121 Mal
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Stell Dir eine Messsteckdose vor (z.B. HMIP-PSM) die alle 20 sec Werte schickt. Immer volles Programm Spannung, Frequenz, Strom, Leistung ...
Und default wird erst mal alles schön mitgeloggt.
Oder ein Bewegungsmelder in einem Bereich wo ständig Bewegung ist. Das muss ja kein Programm triggern, aber die Werte werden mitgeschrieben.
-
- Beiträge: 1801
- Registriert: 03.11.2010, 10:25
- System: CCU
- Wohnort: Aachen
- Hat sich bedankt: 60 Mal
- Danksagung erhalten: 266 Mal
- Kontaktdaten:
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Das ist die eigentliche Datenbank des CCU-Historians. Sie ist damit ungefähr 2 GB (Gigabyte) groß. Diese Größe ist nicht außergewöhnlich. Die Datenbank kann kleiner gehalten werden, wenn Datenpunkte deaktiviert werden oder eine Vorverarbeitung aktiviert wird. Beides ist in der Datenpunktkonfiguration zu finden.
Dass der CCU-Historian 1,5 oder 2,1 TB (Terrabyte) belegen soll, halte ich für sehr unwahrscheinlich. So eine große Datei (oder Verzeichnis) muss leicht mit dem Linux-Befehl du zu finden sein.
- Hoppla
- Beiträge: 341
- Registriert: 29.12.2018, 19:39
- System: Alternative CCU (auf Basis OCCU)
- Wohnort: Leipzsch
- Hat sich bedankt: 35 Mal
- Danksagung erhalten: 12 Mal
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Betrachten wir das Thema als gelöst.
Backup läuft, morgen ist das fertig, dann kaufe ich den rpi ...
Backup läuft, morgen ist das fertig, dann kaufe ich den rpi ...
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Ich betreibe seit letzter Woche auch eine CCU-Historian Installation und habe eine konkrete Frage zur Konfiguration in der CCU3 WebUI für die Datensammlung.
Um mehr Daten zu erhalten habe ich in den einzelnen Geräten in WebUI die zyklischen Statusmeldungen (und auszulassenden) angepasst (1:3 von 1:20).
Was ich nicht genau herausgelesen habe: Greift CCU-Historian selbst Daten aktiv ab, weshalb ich diese Statusmeldungen wieder zurücksetzen kann, oder sind es eben genau diese Rückmeldungen, die CCU-Historian abgreift?
Wenn ersteres, könnte ich meinen Duty Cycle nämlich wieder etwas herunterschrauben.
Danke und Gruß
Um mehr Daten zu erhalten habe ich in den einzelnen Geräten in WebUI die zyklischen Statusmeldungen (und auszulassenden) angepasst (1:3 von 1:20).
Was ich nicht genau herausgelesen habe: Greift CCU-Historian selbst Daten aktiv ab, weshalb ich diese Statusmeldungen wieder zurücksetzen kann, oder sind es eben genau diese Rückmeldungen, die CCU-Historian abgreift?
Wenn ersteres, könnte ich meinen Duty Cycle nämlich wieder etwas herunterschrauben.
Danke und Gruß
-
- Beiträge: 3734
- Registriert: 23.09.2017, 12:04
- Hat sich bedankt: 66 Mal
- Danksagung erhalten: 121 Mal
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Hallo
Historian registriert sich nur als Datenempfänger bei der CCU3 und bekommt dann alle anfallenden Daten der Datenpunkte geschickt.
Regelmässig abgefragt werden nur in langen Abständen z.B. die Namenslisten o.ä.
Historian registriert sich nur als Datenempfänger bei der CCU3 und bekommt dann alle anfallenden Daten der Datenpunkte geschickt.
Regelmässig abgefragt werden nur in langen Abständen z.B. die Namenslisten o.ä.
- koppenho
- Beiträge: 227
- Registriert: 27.12.2013, 09:12
- Wohnort: Bad Neustadt, Deutschland
- Hat sich bedankt: 2 Mal
- Danksagung erhalten: 2 Mal
Re: CCU-Historian: Ein Langzeitarchiv für die CCU
Mein Beitrag kommt möglicherweise etwas zu spät für die Beteiligten.
Es ging um die Frage, wohin die temporären Daten geschrieben werden während eines "compact".
Wenn man also eine Platte mit viel Platz angeschlossen und gemountet hat, dann kann das so ähnlich funktionieren:
Man sollte allerdings darauf achten dass die zusätzliche Platte nicht als FAT formatiert ist, denn dann läuft man möglicherweise wie ich in die Falle: Dateien auf FAT können max. 2GB große werden (oder waren es 4GB?) ).
Jemand anderes hat irgedwann mal gefragt, was genau "compact" tut.
"compact" tut, soweit mir bekannt, nichts anderes als ein Backup schreiben, alte Datenbank löschen, Backup restaurieren und schließlich die temporäre Datei löschen.
Es ging um die Frage, wohin die temporären Daten geschrieben werden während eines "compact".
Habe das vor ein paar Wochen beobachtet: die Daten werden in das Verzeichnis (current working directory) geschrieben, in dem man sich befunden hat als man den "compact" aufgerufen hat.
Wenn man also eine Platte mit viel Platz angeschlossen und gemountet hat, dann kann das so ähnlich funktionieren:
Code: Alles auswählen
cd /platte/mit/viel/platz
java -jar /pfad/zum/jar-file/ccu-historian.jar -compact
Jemand anderes hat irgedwann mal gefragt, was genau "compact" tut.
"compact" tut, soweit mir bekannt, nichts anderes als ein Backup schreiben, alte Datenbank löschen, Backup restaurieren und schließlich die temporäre Datei löschen.
--
Andreas
--------------------------------------------
Hauptwohnung: RaspberryMatic mit 320 Kanäle in 110 Geräten und 140 CUxD-Kanäle in 33 CUxD-Geräten
Zweitwohnung: CCU2 mit 18 Kanäle in 8 Geräten und 14 CUxD-Kanäle in 4 CUxD-Geräten
--------------------------------------------
Andreas
--------------------------------------------
Hauptwohnung: RaspberryMatic mit 320 Kanäle in 110 Geräten und 140 CUxD-Kanäle in 33 CUxD-Geräten
Zweitwohnung: CCU2 mit 18 Kanäle in 8 Geräten und 14 CUxD-Kanäle in 4 CUxD-Geräten
--------------------------------------------