Rails memory leak/OOM kills

[daniel-illi]

Auf Produktion von PBS gibt es im rails pod ein memory leak. Dieses führt dazu, dass das verfügbare memory kontinuierlich gefüllt wird bis das memory limit überschritten wird, danach wird der pod gekillt und neu gestartet.

Aktuell ist ein Limit von 3 GiB gesetzt. Mit diesem dauert es ca. 24h bis das memory voll ist.
Probeweise wurde das Limit auf 4 GiB erhöht, da war das memory nach ca. 48h voll.

Es gibt 2 rails pods, daher merken die meisten user nichts davon, wenn einer gekillt und neu gestartet wird. D.h. die Applikation ist praktisch unterbruchsfrei verfügbar. Nur die Person, deren request gerade vom gekillten pod verarbeitet wurde, erhält einen http error.

Bei den anderen Hitobito Instanzen können wir kein vergleichbares Verhalten entdecken, anscheinend beschränkt sich das memory leak auf die PBS Instanz.