Datenbank aufräumen

svenp1 2022-12-27 07:28:13 UTC #1

Hallo, da meine Sicherungen immer länger dauern habe ich einmal nachgesehen woran das liegen könnte.
Dabei ist mir aufgefallen das meine Mysql Datenbank sehr groß geworden ist.

Wenn ich nun die Datenbank nach größe der Tabellen sortiere fallen mir folgende Tabellen ins Auge:

egw_cal 349 MB
egw_cal_user 77,2 MB
egw_history_log 58 MB
egw_cal_dates 43 MB
egw_openid_access_tokens 8MB
egw_openid_access_token_scopes 13 MB

Bei egw_cal sehe ich viele Einträge die ein Zeitstempel bei cal_deleted haben. Also wenn ich nicht irre gelöschte Einträge.
In den Einstellungen zum Kalender sehe ich 2 Punkte unter Protokollierung der Historie

Das Löschen von Einträgen verhindern
Bereinigt bzw. löscht alte Termine automatisch.

Punkt 1 habe ich jetzt auf: Ja Benutzer dürfen ihre glöschen Eintragäe endgültig löschen. gesetzt.
Kann ich damit nun die gelöschten Termine aus der Datenbank entfernen? Ich hätte nun erwartet das ich in der Web Gui ein Knopf im Kalender finde. Z.b. Gelöschte Termine endgültig löschen…

Was bedeutet Punkt 2?
Werden “alle” alten Termine gelöscht und nur die zuvor gelöschten?

StefanU 2022-12-27 11:27:57 UTC #2

Hi Sven.

Mal als Anhaltspunkt:
Privat seit 2008: 4,4 Sekunden, 4,4 MB
Gewerblich seit 2010: 86 Sekunden, 20,8 MB

Ich habe noch nie etwas gelöscht.

Es gibt mittlerweile nur noch Optionen mit Löschschutz. Ansonsten fällt die Synchronisation auf die Nase.

grafik

und dann am besten Listenansicht => Löschen was du meinst

Ich denke alle. So wie es dort steht.
Wann das aber ausgeführt wird weiß ich nicht. Ich habe mir meine EGw mal kopiert und schaue mal ob ich das herausfinden kann.

Stefan

svenp1 2022-12-27 12:35:17 UTC #3

Wenn ich gelöschte aufrufe bricht mir der Webmailer förmlich zusammen.
Ich habe mir einmal angesehen warum ich so viele gelöschte habe.
Es wird ein Externer Belegungskalender automatisch gesynct.
Beim Syncen habe ich angegeben das die Termine gelöscht werden sollen.
Das macht er aber nicht sonder setzt in der Datenbank nur gelöscht.
Nun habe ich schon über 700.000 Datensätze im Kalender und es wird stündlich mehr weil der Sync alle 60 Minuten läuft.

Da es über die Weböberfläche nicht mehr geht würde ich das löschen direkt über sql machen wollen.
Wenn ich das richtig sehe reicht es nicht die Termine aus egw_cal zu löschen?

StefanU 2022-12-27 13:02:23 UTC #4

?. Du meinst Kalender?..

Wähle doch erst einmal die Listenansicht und dann einen kleineren Zeitraum. Dann erst auf die gelöschten selektieren.

Wenn du solche Mengen an Daten hantierst, müsstest du ggf. den Session-Timeout hochsetzen.
Grundsätzlich kann so etwas halt dauern…

Stefan

svenp1 2022-12-27 13:04:46 UTC #5

Mit dem kleineren Zeitraum habe ich probiert aber es scheint einfach zu viel zu sein.
Nur selbst wenn es funktonieren sollte, wenn die Datenmenge nachher so klein ist, werde ich vermutlich Jahre brauchen bis ich alles gelöscht habe.

svenp1 2022-12-28 08:00:01 UTC #6

So ich habe es nun direkt von der Datenbank gelöscht.
Über 700.000 Datensätze die als gelöscht markiert waren sind aus der Datenbank raus.
Die Sicherung läuft nun ebenfalls in Sekunden durch.

Zur Erklärung warum es dazu kam und sicher auch in Zukunft dazu kommt.

Ich möchte einen anderen Kalender in eGroupware sehen der in einer anderen Anwendung als iCal zur Verfügung steht.

Die einzige Möglichkeit die ich kenne ist einen eigenen Benutzer in eGroupwaware anlegen und ein Import/Export Auftrag dafür anlegen.
Das hat nun Jahre gut funktioniert bis eGroupware immer häufiger fehler beim Import gemeldet hat und auch meine Sicherung wurde immer größer was ich mir nicht erklären konnte.

Grund dafür waren die nur als gelöscht markierten Kalendereinträge.

Ich hoffe das es vollständig ist. Mit den SQL Befehlen habe ich alle Kalendereinträge die als gelöscht markiert waren auf den Tabellen gelöscht.
Bei mir hat der Kalenderbenutzer die ID 14.

Wer also mal auf das gleiche Problem stößt bitte cal_owner anpassen.

delete from egw_cal_user where cal_id in (select cal_id from egw_cal where cal_owner = 14 and cal_deleted is not null)
delete from egw_cal_repeats where cal_id in (select cal_id from egw_cal where cal_owner = 14 and         cal_deleted is not null)
delete from egw_cal_dates where cal_id in (select cal_id from egw_cal where cal_owner = 14 and cal_deleted is not null)
delete from egw_cal_extra where cal_id in (select cal_id from egw_cal where cal_owner = 14 and cal_deleted is not null)
delete from egw_cal_user where cal_id in (select cal_id from egw_cal where cal_owner = 14 and cal_deleted is not null)
delete from egw_cal where cal_owner = 14 and cal_deleted is not null