Sejak server mulai aktif (±31 Juli 2026) hingga laporan ini disusun, layanan mengalami gangguan berulang yang bersumber dari infrastruktur Data Center — baik dari sisi catu daya listrik maupun jaringan. Seluruh gangguan ini bukan berasal dari perangkat keras kami maupun dari aktivitas/ trafik kami; perangkat server justru dalam kondisi sehat (OS berjalan tanpa reboot selama berminggu-minggu di antara insiden). Terdapat total 10 insiden yang kami rangkum beserta buktinya di bawah ini.
| # | Tanggal | Jenis | Jam / Durasi (WIB) | Keterangan |
|---|---|---|---|---|
| 1 | 31 Jul 2026 | Daya | 17:16 & 17:30 (AC lost) | Hiccup catu daya di hari server mulai aktif (boot pertama 19:04). |
| 2 | 24 Agu 2026 | Pemadaman daya | 17:45 – 23:34 (±5j49m) | Server mati total akibat hilang listrik DC; pemulihan tidak stabil (flapping 8×). Lihat §3. |
| 3 | 27 Agu 2026 | Daya (PSU2) | 19:01 – 19:08 | PSU-2 "AC lost" — redundansi daya hilang (risiko mati berulang). |
| 4 | 3 Sep 2026 | Jaringan (523) | ~20:56 – 20:58 | Cloudflare 523 + blip SSH (transient DC↔CF); layanan absensi terganggu ±1 jam lalu pulih sendiri. |
| 5 | 9 Sep 2026 | Jaringan (523) | 2–3× sepanjang hari | "Origin is unreachable" di semua domain; packet-loss inbound (edge Singapura). Dimitigasi dgn tunnel. |
| 6 | 17–18 Sep 2026 | Jaringan (IP di-drop) | ±01:45 – 08:00 | IP di-drop berulang filter DDoS DC; down 30–52 mnt per siklus, nyaris nonstop. Lihat §4. |
| 7 | 20 Sep 2026 | Jaringan | sepanjang hari | Drop berlanjut → tunnel dimatikan, pindah ke direct-IP (mitigasi dari sisi kami). |
| 8 | 21 Sep 2026 | Blackhole IP | ~17:27 – 18:00 (±33m) | IP .234 di-blackhole DC (asimetris); 522 semua domain. Pulih saat DC mencabut blackhole. |
| 9 | 22 Sep 2026 | Jaringan (522) | — | Outage 522 kembali terjadi (terdiagnosa; jam presisi tidak tercatat). |
| 10 | 25 Sep 2026 | Blackhole + flapping | 01:44 & 11:10 – 14:05 | DNS nyangkut ke IP mati (522 semua domain, ~11:29) + flapping (±52 mnt total-down, 19× pindah IP). Lihat §4 & Lampiran A. |
| 11 | 25–30 Sep 2026 | Blackhole egress | ±5 hari | DC blackhole jalur keluar server ke tujuan tertentu → OTP gagal, cron timeout, CI/CD gagal, 522. Dimitigasi tunnel WireGuard. |
| 12 | 28 Sep 2026 | Blackhole (beta) | — | Domain beta kena blackhole CF↔origin (timeout 12s); server & origin sehat. |
Setelah 28 September 2026, kondisi relatif stabil hingga laporan ini disusun — sebagian berkat mitigasi dari sisi kami (direct-IP, auto-failover antar-IP, tunnel WireGuard), bukan karena perbaikan permanen di sisi DC.
Sumber: iDRAC System Event Log (SEL) Dell PowerEdge R630 (diekspor 28 Agu 2026; jam BMC terverifikasi = jam OS → timestamp akurat WIB) dan riwayat boot OS.
| Jam (WIB) | Kejadian | Keterangan |
|---|---|---|
| 17:45:38 | MATI TOTAL | OS dan iDRAC/BMC mati bersamaan. Tidak ada log sama sekali (OS maupun SEL) sampai 22:18 = kehilangan catu daya total. |
| 22:18:09 | Listrik kembali | Entri SEL pertama pasca-blackout; daya masuk tapi belum stabil. |
| 22:18 – 00:00 | Flapping daya 8× | Catu daya hilang/kembali berulang 8 kali (lihat bukti di bawah). |
| 23:34:30 | OS stabil | Sistem operasi boot stabil (riwayat boot OS: system boot 24 Agu 23:33). |
| TOTAL | ±5 jam 49 menit | 17:45:38 → 23:34:30 (blackout penuh 17:45–22:18 ≈ 4j32m + pemulihan tidak stabil hingga 23:34). |
51 | 08/24/26 | 22:18:09 WIB | Power Supply Status | Power Supply AC lost | Asserted 52 | 08/24/26 | 23:25:30 WIB | Power Supply Status | Power Supply AC lost | Asserted 55 | 08/24/26 | 23:42:16 WIB | Power Supply Status | Power Supply AC lost | Deasserted 56 | 08/24/26 | 23:44:02 WIB | Power Supply Status | Power Supply AC lost | Asserted 57 | 08/24/26 | 23:54:18 WIB | Power Supply Status | Power Supply AC lost | Deasserted 58 | 08/24/26 | 23:56:35 WIB | Power Supply Status | Power Supply AC lost | Asserted 5a | 08/25/26 | 00:00:27 WIB | Power Supply Status | Power Supply AC lost | Asserted (ringkasan SEL: 94 event; PSU2 AC-loss, redundancy lost)
reboot system boot 6.8.0-138 Mon Aug 24 23:33:33 2026 reboot system boot 6.8.0-138 Mon Aug 24 22:20:10 2026 (boot gagal/awal saat daya belum stabil)
File SEL lengkap: perisaiku-core-SEL-24Agu2026.txt (tersedia sebagai bukti).
Pada seluruh insiden jaringan berikut, server dalam kondisi hidup normal (OS aktif terus-menerus sejak boot 17 Sep 22:32, tanpa reboot), namun IP publik kami di-blackhole/null-route oleh filter anti-DDoS Data Center sehingga layanan tidak dapat diakses dari internet.
Setelah reboot 17 Sep 22:32, IP 103.147.32.234 di-drop berulang oleh filter DDoS DC. Pola: naik sebentar → turun 30–52 menit; tercatat 02:23–03:15 down 52 menit nonstop, dan secara keseluruhan tidak dapat diakses ±99% pada rentang 01:45–03:50. Ambang filter DC dikonfirmasi 20.000 pps/5 detik, sedangkan trafik aplikasi kami hanya ~1.000 pps.
Sejak 21 Sep terpasang pemantauan per-detik (log transisi IP up/down + auto-failover). Berikut buktinya.
2026-09-21 18:14:15 CRITICAL: DUA IP MATI (a_ok=0 b_ok=0) — tak ada aksi
2026-09-24 06:16:07 CRITICAL: DUA IP MATI (a_ok=0 b_ok=0) — tak ada aksi
2026-09-25 01:44:05 CRITICAL: DUA IP MATI (a_ok=0 b_ok=0)
2026-09-25 11:53:49 CRITICAL: DUA IP tak-nyampe-Cloudflare (a_ok=0 b_ok=0)
2026-09-25 11:10:21 FAILOVER: 103.147.32.234 -> 103.147.33.98 (a_ok=0 b_ok=1) — flip DNS + egress
2026-09-25 12:00:51 FAILOVER: 103.147.33.98 -> 103.147.32.234 (a_ok=1 b_ok=0) — flip DNS + egress
... (total 19 perpindahan IP pada 25 Sep; rincian window pada Lampiran A)
Pada 25 Sep ~11:29, seluruh 55 A-record sempat "nyangkut" di IP yang mati di sisi inbound sehingga semua domain 522 walau server sehat; diperbaiki manual + Failover v2 (~11:53). Akumulasi total-down 25 Sep ±52 menit dalam 27 window (rincian jam mulai–selesai pada Lampiran A).
Data Center memblackhole jalur keluar server ke tujuan tertentu (penyedia OTP, Google Sheets, Cloudflare, dll), menyebabkan OTP gagal terkirim, cron gagal (timeout), CI/CD gagal, dan error 522. Gangguan berlangsung ±5 hari dan baru teratasi setelah kami memasang tunnel WireGuard (26 Sep) sebagai jembatan — bukan karena perbaikan di sisi DC.
Kondisi "kedua IP publik tidak dapat menjangkau internet". Waktu WIB; resolusi pemantauan ~32 detik. Durasi <1 menit = tertangkap pada satu sample.
| Mulai | Selesai | Durasi |
|---|---|---|
| 01:44:05 | 01:44:37 | <1 mnt |
| 11:53:49 | 11:55:57 | 2m08s |
| 11:58:30 | 12:00:38 | 2m08s |
| 12:02:54 | 12:05:34 | 2m40s |
| 12:12:05 | 12:14:46 | 2m41s |
| 12:17:38 | 12:18:42 | 1m04s |
| 12:22:43 | 12:23:15 | <1 mnt |
| 12:32:42 | 12:34:18 | 1m36s |
| 12:37:45 | 12:39:22 | 1m37s |
| 12:43:27 | 12:46:07 | 2m40s |
| 12:52:39 | 12:55:20 | 2m41s |
| 12:58:05 | 12:59:41 | 1m36s |
| 13:01:43 | 13:04:24 | 2m41s |
| 13:07:03 | 13:08:07 | 1m04s |
| Mulai | Selesai | Durasi |
|---|---|---|
| 13:10:54 | 13:13:35 | 2m41s |
| 13:17:34 | 13:20:15 | 2m41s |
| 13:22:08 | 13:24:16 | 2m08s |
| 13:26:54 | 13:30:39 | 3m45s |
| 13:32:40 | 13:33:44 | 1m04s |
| 13:36:23 | 13:38:31 | 2m08s |
| 13:40:42 | 13:43:55 | 3m13s |
| 13:45:43 | 13:47:51 | 2m08s |
| 13:52:11 | 13:54:52 | 2m41s |
| 13:57:36 | 13:58:40 | 1m04s |
| 14:01:33 | 14:04:14 | 2m41s |
| Akumulasi 25 Sep | ±52 menit | |
last -Fx reboot) — server mulai aktif 31 Jul 2026:reboot system boot 6.8.0-139 Thu Sep 17 22:32:42 2026 still running reboot system boot 6.8.0-138 Mon Aug 24 23:33:33 2026 reboot system boot 6.8.0-138 Mon Aug 24 22:20:10 2026 reboot system boot 6.8.0-136 Fri Jul 31 19:04:43 2026 wtmp begins Fri Jul 31 19:04:43 2026
4f | 07/31/26 | 17:16:52 WIB | Power Supply AC lost | Asserted 50 | 07/31/26 | 17:30:36 WIB | Power Supply AC lost | Asserted 51 | 08/24/26 | 22:18:09 WIB | Power Supply AC lost | Asserted ... (flapping 8x s/d 08/25 00:00:27) 5b–5e | 08/27/26 | 19:01–19:08 WIB | Power Supply AC lost | Asserted/Deasserted (PSU2)
2026-09-21 18:14:15 CRITICAL: DUA IP MATI (a_ok=0 b_ok=0) 2026-09-23 13:30:00 FAILOVER: 103.147.33.98 -> 103.147.32.234 (a_ok=1 b_ok=0) 2026-09-25 11:53:49 CRITICAL: DUA IP tak-nyampe-Cloudflare (a_ok=0 b_ok=0) 2026-09-25 14:03:42 CRITICAL: DUA IP tak-nyampe-Cloudflare (a_ok=0 b_ok=0) (window down terakhir)
last, uptime) — kapan server mati/hidup./var/log/ip-failover.log) — rincian window total-down jaringan (terpasang 21 Sep; data 17–20 Sep bersifat perkiraan karena pemantauan per-detik belum terpasang).Seluruh waktu dalam zona WIB (UTC+7). Angka durasi dikutip apa adanya dari log & catatan internal; beberapa insiden (no. 9 & 11) tidak memiliki jam presisi di catatan. Log mentah lengkap tersedia bila diperlukan.