Bug #1195: [infra] Bug crash container logging ELK - TTSOpenAI - Redmine

Actions

Copy link

Bug #1195

closed

[infra] Bug crash container logging ELK

Added by Phước Ngọc Trần 3 months ago. Updated 18 days ago.

Status:

Closed

Priority:

Normal

Assignee:

Phước Ngọc Trần

Category:

Start date:

10/26/2024

Due date:

10/27/2024

% Done:

100%

Estimated time:

2:30 h

Spent time:

3:00 h

Description

Container fluent bit send log về ELK thường xuyên bị crash.

Lý do: Fluentbit bị memoryleak
Ở phần configmap cho fluentbit thêm
[FILTER]
Name multiline
....
emitter_mem_buf_limit 25MB
Và điều chỉnh Mem_Buf_Limit=x2emitter_mem_buf_limit

Files

clipboard-202410270113-64be8.png (166 KB) clipboard-202410270113-64be8.png

Phước Ngọc Trần, 10/26/2024 11:43 PM

Actions

Copy link

Updated by Phước Ngọc Trần 3 months ago

- Đã add cấu hình vào, đang monitor để sáng ngày 27-Oct-2024 coi còn bị crash nữa không

Actions

Copy link

Updated by Phước Ngọc Trần 3 months ago

% Done changed from 0 to 100

Sau khi setup
[FILTER]
Name multiline
....
emitter_mem_buf_limit 25MB
Và điều chỉnh Mem_Buf_Limit=x2emitter_mem_buf_limit

=> Vẫn bị crash log
Tiếp tục chỉ mem_buffer lên 1GB
=> Vẫn bị crash log
chuyển dổi
[FILTER]
Name multiline
...
buffer off
=> OK sau 16h vẫn chưa bị lỗi crash log

Actions

Copy link