question

Hi Stewart,

Thank you for the answer. The period of the logging database is from 18/04/2020 to 23/10/2020 (i.e. 188 days or ~6,26 months).

In my case the way via VRM would not be a solution (I log completely offline and want to evaluate offline as well).

In my opinion, VenusOS should be improved here:
If the PC software "VictronConnect" only accepts databases with a maximum size of 500 MB, then this must be taken into account when creating the database. This means that the CCGX would have to implement this and accordingly create new database files on the SD card, which are smaller/equal to the file size limit in "VictronConnect".

In short: The creation of the logging databases must match the evaluation-/conversion software.

The CCGX specifications state that offline logging is possible and that the CCGX supports SD memory cards up to 32GB. For this reason I use a 32GB micro SD card, so that the device can store all data for a long time.
In the current state it means that I have to read out the memory card regularly e.g. every 4 months and must ensure that a new database-file is created (by deleteing/renaming the existing file). I can't do that, the period is too short.

Are there any other possibilities to evaluate/convert the logging database (with file size larger than 500 MB) offline?
(As described, the VRM is not an option here for the time being).

Thanks a lot.

Best regards,
DaKy

--------------------
In German:

Hallo Stewart,

Danke für die Antwort. Der Zeitraum der Logging-Datenbank ist vom 18.04.2020 - 23.10.2020 (also 188 Tage bzw. ~6,26 Monate).

In meinem Fall wäre der Weg über die VRM keine Lösung (ich logge komplett Offline und will auch Offline auswerten).

Ich bin der Meinung, dass das VenusOS hier nachgebessert werden müsste:
Wenn die PC-Software "VictronConnect" nur Datenbanken mit einer maximalen Größe von 500 MB akzeptiert, dann muss dies bei der Datenbank-Erstellung berücksichtigt werden. Das heißt, dass der CCGX dies umsetzen müsste und entsprechend neue Datenbank-Dateien auf der SD-Karte anlegen muss, die kleiner/gleich der Dateigrößen-Grenze in "VictronConnect" sind.

Kurz um: Die Erstellung der Logging-Datenbanken muss zum Auswerte-/Konvertierungsprogramm passen.

In den technischen Daten des CCGX steht, dass Offline-Logging möglich ist und dass das CCGX SD-Speicherkarten bis 32GB unterstützt werden. Aus diesem Grund nutze ich eine 32GB-Micro-SD-Karte, damit das Gerät für lange Zeit alle Daten loggen kann.
Im momentanen Zustand bedeutet es, dass ich regelmäßig z.B. alle 4 Monate die Speicherkarte auslesen muss und dafür sorgen muss, dass eine neue Datenbank-Datei erstellt wird (durch Löschen/Umbenennen der bisherigen Datei). Das kann ich nicht machen, der Zeitraum ist zu kurz.

Gibt es weitere Möglichkeiten, die Logging-Datenbank (mit Dateigröße größer 500 MB) offline auszuwerten/zu kovertieren?
(Wie beschrieben, das VRM ist hier erstmal keine Option.)

Vielen Dank.

Mit freundlichen Grüßen,
DaKy

@DaKy, We have sent you an e-mail. Please, check your inbox.

Hello @jperez,

I have answered your email and uploaded the file.

It would be important for me to be able to use the 32 GB memory card completely and convert afterwards the data offline.

Since the memory card has the file system FAT32, the maximum file size of a database file can be 4 GB. This means that the ColorControlGX (VenusOS) has to create several database files accordingly (at the latest when reaching the maximum file size of 4 GB).

But probably database files with a size of 500 MB are okay, because database files with a size of 4 GB are likely to be much larger than 4GB when converted to Excel format.
Such large files are probably not handled well by Excel (although I have not tested it yet).

I would like it very much if you could export not only to Excel format (*.xlsx) but also to *.csv format. (Preferably with a possibility to select certain data (columns) before export).

In any case it must be ensured that the database files created by CCGX / VenusOS can be converted offline later.

Thanks a lot.

Best regards,
DaKy



--------------------
In German:

Hallo @jperez,

ich habe deine eMail beantworted und die Datei hochgeladen.

Für mich wäre es wichtig, dass ich die 32 GB Speicherkarte komplett ausnutzen kann und die Daten im nachhinein offline konvertieren kann.

Da die Speicherkarte das Dateisystem FAT32 hat, kann die maximale Dateigröße einer Datenbank-Datei 4 GB betragen. Das heißt, der ColorControlGX (VenusOS) muss entsprechend mehrere Datenbank-Dateien erstellen (spätestens beim Erreichen der max. Dateigröße von 4 GB).

Vermutlich sind aber Datenbank-Dateien mit einer Größe von 500 MB in Ordnung, da Datenbank-Dateien mit einer Größe von 4 GB beim konvertieren ins Excel-Format wahrscheinlich deutlich größer werden als 4 GB.
Solche großen Dateien kann Excel bestimmt nicht so gut verarbeiten (wobei ich es noch nicht getestet habe).

Ich würde es sehr wünschen, wenn nicht nur ins Excel-Format (*.xlsx) sondern auch ins *.csv-Format exportiert werden könnte. (Am besten noch mit einer Möglichkeit, bestimmte Daten (Spalten) vor dem Export auszuwählen.)

In jedem Fall muss aber sichergestellt sein, dass die vom CCGX / VenusOS erstellten Datenbank-Dateien später offline konvertiert werden können.

Vielen Dank.

Mit freundlichen Grüßen,
DaKy

Hi @DaKy,

We have removed the file size limit and improved the log converter on the recently released VictronConnect v5.35.