Pilot Event Operations Runbook — OS-v1.0 (OS-080)
Panduan operasional resmi untuk pelaksanaan event pilot olimpiade CBT terproteksi menggunakan sistem Scola Assessment Standalone CBT (Baseline OS-v1.0).
Dokumen ini memenuhi kriteria penerimaan AC-24 (Kesiapan Operasional, Observabilitas, Roster Penyelenggara) dan AC-27 (Tata Kelola Force-Majeure & Kewenangan Insiden).
1. Pra-Ujian (Pre-Flight Verification) — T-60 Menit
Sebelum peserta diizinkan masuk ke ruang ujian atau memulai sesi admisi, tim operasi wajib menjalankan daftar periksa berikut:
-
Verifikasi Immutable Release Manifest: Pastikan artefak backend, migrasi database, dan bundle frontend cocok dengan candidate immutable yang telah disetujui untuk event:
bash scripts/ops/release_immutable_guards.sh --verify⛔ STOP: Jika verifikasi gagal (kode keluar non-zero), proses admisi DILARANG dibuka sampai rilis dipulihkan ke versi identik.
-
Pemeriksaan Isolasi Lingkungan & Kemandirian: Pastikan tidak ada dependensi eksternal atau proses silang dengan server Odoo:
Gunakan endpoint dan identity probe yang disetujui platform owner; HTTP 200 sendiri tidak membuktikan source, database, atau konfigurasi candidate.curl -s http://127.0.0.1:8000/health | jq . -
Verifikasi Kesiapan Database & Recovery: Platform owner membuktikan backup age, WAL archive/managed-PITR health, object-storage backup, recovery point, dan alert routing pada topology event. Target RPO/RTO tidak boleh diganti menjadi nol atau dinyatakan tercapai oleh probe koneksi database.
-
Pemberlakuan Change Freeze: Selama H-1 hingga selesainya event pilot dan penutupan hasil resmi, berlaku strict change freeze:
- Dilarang menjalankan migrasi database baru.
- Dilarang melakukan update pada host reverse-proxy atau container server.
- Dilarang melakukan deployment frontend baru.
2. Pelaksanaan Ujian (Live Event Coordination) — T-0 s.d. Selesai
2.1 Admisi & Kesiapan Klien
- Peserta membuka halaman kesiapan (
/readiness) di browser web biasa dari perangkat yang didukung (Windows 10/11, macOS 12+, atau iPadOS 16+). - Halaman memvalidasi kesiapan perangkat: sistem operasi, Safe Exam Browser (SEB resmi), konfigurasi monitor tunggal, dan ketersediaan kamera.
- Peserta wajib memperoleh status
PASSEDlalu mengklik tombol peluncuran aman (sebs://) untuk memasuki lembar ujian di Safe Exam Browser.
2.2 Pengawasan Dual-View & Command Center
- Pengawas login ke dashboard
ProctorDashboard.vuesesuai room assignment masing-masing (rasio 1:30). - Verifikasi peserta di ruang Zoom sudut 45 derajat (kamera smartphone menyorot layar laptop dan tangan).
- Snapshot berkala kamera depan laptop peserta dikirim secara otomatis via background bulkhead channel.
- Jika terjadi pelanggaran, pengawas mencatat peringatan faktual (reasoned action). Larangan keras: pengawas dilarang mendiskualifikasi sepihak secara otomatis.
2.3 Tata Kelola Force-Majeure & Gangguan Infrastruktur (AC-27)
[!CAUTION] ATURAN MUTLAK FORCE-MAJEURE: Gangguan jaringan peserta, server restart sementara, atau pemulihan database PITR DILARANG MEMPERPANJANG DEADLINE PESERTA SECARA OTOMATIS. Waktu ujian
server_deadlinetetap mengacu pada waktu absolut server yang tercatat di tabelattempts. Perpanjangan waktu atau pemberian sesi susulan (retest) HANYA DAPAT DISETUJUI SECARA MANUAL oleh Ketua Komite Pengawas (Incident Authority) dengan berita acara tertulis.
3. Penutupan Ujian & Rekonsiliasi Hasil (Event Closeout) — Pasca-Ujian
Setelah jendela pengerjaan ujian berakhir:
-
Pembersihan Batas Waktu (Deadline Sweeper): Pastikan seluruh attempt peserta yang telah melewati
server_deadlinediubah statusnya menjadi terminal (submittedatauclosed_by_deadline):python3 -c "from app.workers.sweeper import sweep_expired_attempts; sweep_expired_attempts()" -
Penilaian Esai Buta & Moderasi (Two-Person Rule):
- Penilai (grader) menilai seluruh esai pada antrean penilaian buta tanpa PII.
- Peninjau (reviewer) memoderasi 100% penilaian esai (
is_moderated=True). -
Penilai dilarang mengakses endpoint kamera pengawas (CAM-08).
-
Verifikasi Syarat Penutupan Resmi: Jalankan script validasi closeout terotomasi:
python3 scripts/ops/pilot_event_closeout.py --session-id <SESSION_UUID> -
Penerbitan Hasil Akhir (Result Publication):
- Hasil dihitung menggunakan aturan Standard Competition Ranking (1, 1, 3 tanpa pembeda durasi/waktu kumpul).
- Snapshot diterbitkan dengan model append-only supersession versi increment.
-
Hasil diunduh dalam format CSV yang aman dari injeksi formula (formula injection defense).
-
Penandatanganan Berita Acara Rekonsiliasi: Penyelenggara dan ketua komite menandatangani berita acara penutupan event pilot.