[10:43] Server Monitoring Mangkuk Merah memberikan notifikasi server Sushi tidak dapat diakses [10:53] Saat ini sedang dilaksanakan pemeriksaan apakah yang menyebabkan server tidak dapat diakses. Laman ini akan terus diupdate. [10:56] Server sudah kembali berjalan dengan normal dan dapat diakses dengan normal setelah dilakukan restart pada router di data center.

[15:54] Server melaporkan High Load [15:55] Seluruh proses Apache, Nginx , PHP dan SQL di matikan lalu di restart [15:57] Server kembali normal. Total Downtime : 1 menit 14 detik [17:30] Sushi kembali berulah dan kali ini harus di reboot. Load mendadak naik menjadi 29 dari nilai normal 2-4 [18:03] Currently fsck-ing [18:31] Fsck masih […]

[12:01] Sushi down dengan laporan High CPU Usage, sedang dicari permasalahannya. Kemungkinan terbesar serangan lagi. [12:14] Diputuskan untuk dilakukan Remote Reboot karena SSH terkonek namun sangat lambat dikarenakan load yang sangat tinggi [12:20] Running fsck [13:31] fsck berlangsung lebih lama dari yang diharapkan, yang ingin akunnya dipindahkan ke server udon harap segera hubungi support [16:17] […]

Telah terjadi DOS attempt pada salah satu akun yang dihosting di Mangkuk Merah pada pagi hari pukul 09:13 WIB. Langkah preventif sudah dilakukan dengan suspend sementara akun tersebut dan null-route beberapa IP yang memiliki koneksi lebih dari 200.

[09:13] Panopta melaporkan adanya downtime [09:20]  Server masih bisa di ping namun sangat lambat saat diakses. Dilakukan netstat untuk memeriksa koneksi yang tersambung dan diketemukan koneksi abnormal dari beberapa IP yang menyerang satu akun yang dihosting di Mangkuk Merah. Beberapa contoh koneksi 5409 173.2xx.xxx.xxx 2265 173.2xx.xxx.xxx 2233 173.2xx.xxx.xxx 1537 173.2xx.xxx.xxx 1506 173.2xx.xxx.xxx [09:40] IP yang […]

[16:00] Apache yang baru di upgrade tidak stabil dan menyebabkan beberapa website tidak dapat diakses. Beberapa website tetapi aman dan dapat diakses dengan baik. [16:15] Dilakukan perubahan di MaxClients dan ServerLimit Apache. Apache di rebuild kembali [16:45] Apache kembali tidak stabil, dan beberapa website kembali tidak dapat diakses. [17:18] Masih dicari penyebab Apache tidak stabil [19:35] Beberapa value […]

Setelah melihat log resource usage sebelum terjadinya Outage yang cukup panjang, diketemukan kejanggalan pada beberapa akun user antara lain penggunaan resource SQL yang sangat tinggi serta connection per IP yang cukup tinggi dari beberapa dedicated IP klien yang di whitelist di firewall yang mengakibatkan server hang dan tidak merespon perintah remote reboot via Panel Data […]