Lewati ke isi

Register gap implementasi CBT — 20 September 2026

Baseline source 45e16ba86cb35df5b8e36084c62237174790ee1c. Seluruh entri OPEN dan release_required=yes; P1 tetap wajib v1. Audit dan batas pembuktian, backlog CSV, rekomendasi keputusan.

Nomor baris adalah anchor source pada SHA audit; nama fungsi dipakai bila lebih stabil. REPRODUCED hanya berlaku pada subkasus yang disebut, bukan seluruh kemungkinan kegagalan pada entri. Scope produksi/Windows yang belum dijalankan tetap NOT_VERIFIED.

CBT-001 — MFA privileged dan lifecycle autentikasi belum wajib

P0 · REPRODUCED · OPEN. Area: Identity. SSOT: AC-05; story: OS-020 RM-002.

Owner role: Identity + Security. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/auth.py:54; backend/app/schemas/auth.py.

Login exam_manager sintetis mfa_enabled=false menghasilkan HTTP 200. MFA hanya mengikuti flag user; enrollment/recovery belum tersedia. Login/MFA tidak mempunyai throttle aplikasi atau konsumsi challenge sekali pakai.

Perubahan yang harus dibuat: Wajibkan enrollment MFA sebelum akses privileged; challenge sekali pakai, rate limit terdistribusi, recovery diaudit dan revoke seluruh sesi. Validasi origin login. Jangan mengandalkan toggle DB.

Acceptance penutupan: Login privileged tanpa MFA ditolak/masuk enrollment; OTP/challenge replay ditolak; multiworker brute force dibatasi; recovery dan disable akun membatalkan sesi berikutnya.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-01

CBT-002 — Provisioning organizer dan pengelolaan staf belum lengkap

P1 · CONFIRMED_CODE · OPEN. Area: Identity. SSOT: AC-05 AC-24; story: OS-020 RM-002.

Owner role: Identity + Security. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/organizers.py:34; backend/app/schemas/organizer.py; frontend/src/router/index.ts.

API organizer terutama current/list/add membership existing user; role berupa string dan belum ada workflow deactivate/change role/invite/reset. Platform operator mempunyai capability provisioning tetapi belum workflow provisioning. Tidak ada UI staf.

Perubahan yang harus dibuat: Lengkapi provisioning minimum pilot, allowlist roles, membership activation/revocation dengan audit; pisahkan operator dari data ujian. Pilih organizer eksplisit jika lebih dari satu membership.

Acceptance penutupan: Owner mengelola staf tenant sendiri dari UI; invalid/escalated role ditolak; operator provisioning tidak dapat membaca jawaban/evidence; pencabutan efektif pada request berikut.

Dependensi: CBT-001 Keputusan: REC-01

CBT-003 — Scope event dan capability belum konsisten dengan matrix

P0 · CONFIRMED_CODE · OPEN. Area: Authorization. SSOT: AC-01 AC-05 AC-06 AC-15; story: OS-020 OS-021 RM-002.

Owner role: Identity + Security. Reviewer independen belum ditunjuk.

Bukti source: backend/app/core/tenancy.py:22; backend/app/api/v1/events.py:160; backend/app/api/v1/forms.py:252.

API umumnya tenant+role, belum assignment event untuk admin/manager/author. Capability exam_manager tidak mencantumkan authoring meskipun API mengizinkannya. Author dapat freeze form (juga direproduksi), sedangkan freeze admission adalah exam_manager pada matrix.

Perubahan yang harus dibuat: Implementasi capability dan assignment eksplisit terpusat; samakan API/nav. Role saja tidak menjadi bypass. Pisahkan author draft dari manager freeze, termasuk alias legacy.

Acceptance penutupan: Negative matrix untuk role tunggal, gabungan role, event lain dalam tenant sama, tenant lain, assignment dicabut, freeze oleh author ditolak.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-02

CBT-004 — Rotasi kredensial tidak membatalkan runner lama

P0 · REPRODUCED · OPEN. Area: Identity. SSOT: AC-06 AC-10 AC-13; story: OS-030 RM-002 RM-004.

Owner role: Identity + Security. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/participants.py:422; backend/app/api/v1/runner.py:267; backend/app/core/tenancy.py:require_auth.

Setelah regenerate-credentials, token runner lama masih sync HTTP 200. Revoke enrollment memblokir status saat itu tetapi regenerate mengaktifkan lagi tanpa revoke RunnerSession/LaunchAuthorization lama. Runner memakai bearer sessionStorage; belum cookie terpisah sesuai SSOT, dan belum cek organizer aktif. Staff bearer legacy tetap diterima tanpa StaffSession revocation.

Perubahan yang harus dibuat: Rotasi generation secara atomik untuk enrollment/launch/runner; cek active organizer dan target session setiap request. Migrasikan browser ke Secure/HttpOnly cookie + CSRF; batasi legacy bearer sesuai keputusan eksplisit.

Acceptance penutupan: Old token gagal segera setelah rotate/revoke/re-enable/recovery/deactivate organizer; logout membatalkan cookie dan credential legacy yang relevan; lintas staff-runner token ditolak.

Dependensi: CBT-003 Keputusan: REC-01

CBT-005 — Login dan navigasi gagal untuk peran tunggal

P1 · CONFIRMED_CODE · OPEN. Area: Frontend. SSOT: AC-14 AC-17 AC-24; story: OS-020 OS-050 OS-060 RM-010.

Owner role: Frontend. Reviewer independen belum ditunjuk.

Bukti source: frontend/src/router/index.ts; frontend/src/views/auth/LoginView.vue; frontend/src/views/organizer/EventSetupView.vue.

Redirect default /organizer tetapi guard halaman itu tidak menerima proctor/grader/reviewer/platform_operator murni. Proctor membutuhkan session_id; dashboard tile tidak cukup. Competition_admin setup memanggil bank soal yang tidak diizinkan, sehingga loading gabungan dapat terhenti.

Perubahan yang harus dibuat: Role-aware landing dan assignment selector; load resources menurut capability, tangani forbidden per bagian. Sediakan jalur operasional yang dapat dicapai tanpa mengetik URL.

Acceptance penutupan: Browser E2E login satu role per akun lalu selesaikan tugasnya tanpa403 tak terduga; multi-role dan session-expired memiliki navigasi deterministik.

Dependensi: CBT-003 Keputusan: Implementasi baseline yang sudah disetujui.

CBT-006 — Admission dapat dimulai pada event draft/session belum frozen

P0 · REPRODUCED · OPEN. Area: Competition. SSOT: AC-01 AC-04 AC-06; story: OS-021 OS-024 OS-030.

Owner role: Competition + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/events.py:271; backend/app/api/v1/events.py:359; backend/app/api/v1/runner.py:349.

Start berhasil HTTP200 pada event draft dan session is_frozen=false selama tersedia frozen form. Freeze session hanya memeriksa sebagian kesiapan; tidak menuntut assignment peserta/proctor, policy SEB/readiness dan resolved keputusan. Pembuatan child resources masih dapat mengubah event yang dipublish.

Perubahan yang harus dibuat: State machine draft -> validated -> frozen -> admission -> closed; server memvalidasi seluruh prerequisit dan assignment. Freeze snapshot admission policy dan larang mutasi material setelah admission.

Acceptance penutupan: Draft/unfrozen/unassigned/wrong policy start ditolak; UI/API bypass sama-sama ditolak; frozen tree stabil dan perubahan membutuhkan versi event/sesi baru.

Dependensi: CBT-003 CBT-008 CBT-013 Keputusan: REC-03

CBT-007 — Validasi relasi session dan parameter jadwal belum utuh

P0 · REPRODUCED · OPEN. Area: Competition. SSOT: AC-01 AC-06; story: OS-021.

Owner role: Competition + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/events.py:75; backend/app/api/v1/events.py:308; frontend/src/views/organizer/EventSetupView.vue.

round_id milik organizer lain diterima ketika category_id tidak diisi (201). Validasi durasi positif, finite scoring, timezone-aware datetime dan relasi kategori/round perlu dilengkapi. UI konversi datetime-local mengikuti timezone browser, bukan timezone event.

Perubahan yang harus dibuat: Validasi semua FK melalui event+tenant, selalu turunkan kategori dari round yang sah; schemas/DB constraints untuk finite bounds dan jadwal; tampilkan dan konversi timezone event eksplisit.

Acceptance penutupan: Foreign round dengan/tanpa category ditolak; negative/zero duration, NaN/Inf, naive dates dan end<=start ditolak; user beda timezone menghasilkan jadwal event identik.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-03

CBT-008 — Assignment peserta per session/category/round belum dimodelkan

P0 · CONFIRMED_CODE · OPEN. Area: Competition. SSOT: AC-02 AC-06 AC-16; story: OS-022 OS-030.

Owner role: Competition + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/models/participant.py; backend/app/api/v1/participants.py:92; backend/app/api/v1/runner.py:298.

Enrollment hanya event+room; category_code CSV divalidasi tetapi tidak dipersist sebagai assignment. Runner menerima daftar session event dan memilih frozen form pertama. Tidak ada pemeriksaan overlap assignment; perpindahan room mengubah scope akses atas attempt historis.

Perubahan yang harus dibuat: Model enrollment-session assignment dan pinned form/room per attempt, validasi eligibility kategori/round, overlap dan kapasitas dengan transaksi. Larang pindah room diam-diam saat attempt aktif.

Acceptance penutupan: Dua kategori/round/session, overlap, kapasitas bersaing dan historical room access diuji; peserta hanya mendapat session/form/Zoom yang ditugaskan.

Dependensi: CBT-007 Keputusan: REC-03

CBT-009 — Import belum aman untuk kegagalan parsial dan ukuran besar

P1 · CONFIRMED_CODE · OPEN. Area: Competition. SSOT: AC-02 AC-03; story: OS-022 OS-023.

Owner role: Competition + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/participants.py:92; backend/app/api/v1/questions.py:386.

CSV peserta mengasumsikan nilai string pada strip; truncated rows dapat melewati asumsi itu. Belum batas upload/row/expanded XLSX dan durable batch replay. Credential hasil import hanya pada response, kehilangan response mempersulit distribusi konsisten.

Perubahan yang harus dibuat: Dry-run tanpa writes, commit dengan batch idempotency dan row-level outcome; limit file/rows/decompression; distribusi kredensial terbatas dan diaudit, tanpa menyimpan PIN plaintext permanen.

Acceptance penutupan: Truncated/duplicate/malformed/oversized files mendapat row errors atau4xx; retry batch tidak menduplikasi; timeout sesudah commit dapat direkonsiliasi; fresh import via UI lulus.

Dependensi: CBT-008 Keputusan: Implementasi baseline yang sudah disetujui.

CBT-010 — Lifecycle competition dan setup UI belum seluruhnya tersedia

P1 · CONFIRMED_CODE · OPEN. Area: Competition. SSOT: AC-01 AC-02; story: OS-021 OS-022.

Owner role: Competition + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/events.py; frontend/src/views/organizer/EventsView.vue; frontend/src/views/organizer/EventSetupView.vue.

Create/edit/session/room ada; clone/archive minimum AC-01 belum endpoint/workflow. Setup UI belum menyediakan keseluruhan category/round/scoring/policy yang dibutuhkan untuk menyiapkan event dari awal tanpa manipulasi DB.

Perubahan yang harus dibuat: Lengkapi clone sebagai draft baru tanpa kredensial/attempt/evidence; archive menjaga historical data. UI konfigurasi hierarchy, assignments, policy dan validation summary sesuai backend.

Acceptance penutupan: Admin membuat event multi-round dari kosong, validasi, clone, freeze dan archive melalui UI; frozen/history tidak berubah; audit aktor dan alasan dapat ditelusuri.

Dependensi: CBT-006 CBT-008 CBT-014 Keputusan: Implementasi baseline yang sudah disetujui.

CBT-011 — Validasi option ID dan numeric key belum menjaga integritas

P0 · REPRODUCED · OPEN. Area: Authoring. SSOT: AC-03 AC-04 AC-17; story: OS-023 OS-024 OS-060.

Owner role: Authoring + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/questions.py:151; backend/app/api/v1/forms.py:94.

Dua opsi dengan ID sama, satu benar dan satu salah, diterima201. Numeric key/tolerance menggunakan float tanpa semua finite checks; konfigurasi ambigu dapat lolos sampai freeze/scoring.

Perubahan yang harus dibuat: Unique nonempty option IDs, tepat satu key, finite target/tolerance>=0 dan consistent question schema; validasi ulang freeze/import/version.

Acceptance penutupan: Duplicate option, missing key, NaN/Inf/negative tolerance ditolak dari semua jalur; same logical question rendering+scoring identik dari snapshot.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-04

CBT-012 — Media dan matematika belum menjadi alur author-to-runner

P1 · CONFIRMED_CODE · OPEN. Area: Authoring. SSOT: AC-03 AC-25; story: OS-023 OS-024.

Owner role: Authoring + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/questions.py:68; frontend/src/views/organizer/QuestionsView.vue; frontend/src/views/runner/ExamRunner.vue:70; frontend/src/services/safeHtml.ts.

DOMPurify frontend ada, tetapi backend menyimpan HTML arbitrary; belum layanan upload media scoped immutable. LaTeX divalidasi syntax namun tidak ada pemanggilan renderer matematika di frontend/src; options tampil interpolasi teks. Remote img dapat bergantung pada resource luar saat ujian.

Perubahan yang harus dibuat: HTML allowlist konsisten, media privat milik tenant dengan immutable version dan ukuran, render matematika lokal aman pada stem/opsi/preview/runner. Sediakan aksesibilitas teks alternatif.

Acceptance penutupan: Soal bergambar/rumus identik di preview dan runner SEB; XSS/protocol/external tracking ditolak; media wrongtenant/expired tidak bocor; tidak memuat answer key.

Dependensi: CBT-011 Keputusan: Implementasi baseline yang sudah disetujui.

CBT-013 — Freeze form belum mengunci seluruh definisi sebelum admission

P0 · REPRODUCED · OPEN. Area: Authoring. SSOT: AC-04; story: OS-024 RM-003.

Owner role: Authoring + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/forms.py:151; backend/app/api/v1/forms.py:252; backend/app/api/v1/forms.py:298; backend/app/api/v1/runner.py:66.

Author dapat freeze; pembuatan form baru tidak ditolak karena session frozen. Snapshot attempt sudah baik, tetapi dibangun dari sebagian nilai question/session saat start sehingga paket/policy sebelum start belum satu snapshot authoritative. Legacy items_json masih jalur kompatibilitas.

Perubahan yang harus dibuat: Manager freeze immutable bundle lengkap (items/order/weights/key/rubric/scoring/media/policy/checksum); admission menunjuk bundle version, tidak first form. Quarantine legacy tanpa bukti konversi.

Acceptance penutupan: Perubahan question/session setelah freeze tidak mengubah peserta berikut; create/edit/delete/reorder pada frozen session ditolak; legacy missing proof blocked; checksum bundle dan attempt terverifikasi.

Dependensi: CBT-003 CBT-011 CBT-015 Keputusan: REC-03

CBT-014 — Skala skor PG/numeric/esai dan pembulatan belum konsisten

P0 · CONFIRMED_CODE · OPEN. Area: Scoring. SSOT: AC-04 AC-17 AC-18; story: OS-024 OS-060 OS-061.

Owner role: Scoring + Customer. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/forms.py:79; backend/app/api/v1/forms.py:151; backend/app/api/v1/grading.py:256; backend/app/workers/sweeper.py:10.

Form membagi max_score/count menjadi points_correct, sehingga session.points_correct tidak menjadi sumber final. Esai menjumlah skor kriteria mentah, bukan normalisasi ke poin form; bobot rubric tidak digunakan di total. Float dipakai untuk nilai/ranking. UI tidak menunjukkan kontrak tunggal yang disetujui DEC-03.

Perubahan yang harus dibuat: Pilih model poin final per butir; esai weighted normalized lalu diskalakan ke item maximum; gunakan Decimal dan rounding versioned; simpan wrong/blank/tolerance eksplisit. Tidak menebak penalty customer.

Acceptance penutupan: Golden mixed100items menghasilkan max tepat100; rubric unequal weights terhitung benar; boundaries tolerance/ties/negative penalty dan regrade deterministik pada replay.

Dependensi: CBT-011 CBT-015 Keputusan: REC-04

CBT-015 — Rubrik belum lengkap validasi, versi dan UI

P1 · CONFIRMED_CODE · OPEN. Area: Authoring. SSOT: AC-03 AC-04 AC-17; story: OS-023 OS-024 OS-060.

Owner role: Authoring + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/rubrics.py:43; frontend/src/views/organizer/QuestionsView.vue.

Create rubric hanya memeriksa tidak kosong dan jumlah weight≈1. ID kriteria unik, positive finite max, level bounds dan consistency belum lengkap. Tidak ada endpoint versi rubrik dan editor lifecycle rubric end-to-end.

Perubahan yang harus dibuat: Immutable rubric versions dengan authoring editor, validasi lengkap, freeze sebelum form, preview perhitungan; perubahan membuat versi baru, tidak mengganti rubric attempt.

Acceptance penutupan: Rubrik invalid ditolak sebelum dipakai; author membuat/calibrate/version/freeze dari UI; old attempt tetap memakai rubric lama.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-04

CBT-016 — Input tidak dipulihkan dan ACK dapat menandai soal yang salah

P0 · REPRODUCED · OPEN. Area: Runner. SSOT: AC-07 AC-09 AC-25; story: OS-031 OS-032.

Owner role: Runner BE + FE. Reviewer independen belum ditunjuk.

Bukti source: frontend/src/views/runner/ExamRunner.vue:219; frontend/src/views/runner/ExamRunner.vue:242.

Component probe: server saved answer tidak masuk textarea saat reload; navigasi mempertahankan teks soal sebelumnya; delayed ACK menulis answers[currentQuestion] setelah navigasi sehingga soal lain menjadi answered.

Perubahan yang harus dibuat: State jawaban per question_id; hydrate input saat navigation/reconcile; tangkap attempt/question/revision sebelum async; label tersimpan hanya untuk snapshot ACK sesuai request.

Acceptance penutupan: PG/numeric/esai reload/back-next menunjukkan jawaban masing-masing; delayed/out-of-order ACK tidak mengubah soal lain; server state dibandingkan dengan UI.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-05

CBT-017 — Autosave UI belum queue/retry/reconcile dan tidak bisa mengosongkan jawaban

P0 · CONFIRMED_CODE · OPEN. Area: Runner. SSOT: AC-07 AC-09 AC-11; story: OS-031 OS-032.

Owner role: Runner BE + FE. Reviewer independen belum ditunjuk.

Bukti source: frontend/src/views/runner/ExamRunner.vue:242; frontend/src/views/runner/ExamRunner.vue:264.

Setiap input langsung save dengan revision dari ACK terakhir; concurrent keystrokes dapat memakai revision sama. Tidak ada debounce, pending/retry persisten atau sync reconnect; blank/null dibuang sehingga jawaban tersimpan tidak dapat dihapus. Submit tidak menunggu saves.

Perubahan yang harus dibuat: Per-question ordered queue, stable idempotency key, explicit clear-answer semantics, bounded pending storage dan reconnect reconcile. Submit drain hanya sebelum deadline; tampilkan unsaved loss dengan jelas.

Acceptance penutupan: Rapid type/delete/offline/reload/reconnect/submit menghasilkan latest intended answer; duplicate ACK aman; data pending lewat deadline ditolak tanpa label saved palsu.

Dependensi: CBT-016 CBT-019 CBT-020 Keputusan: REC-05

CBT-018 — Timer, heartbeat dan kegagalan start tidak ditampilkan benar

P0 · REPRODUCED · OPEN. Area: Runner. SSOT: AC-08 AC-09 AC-14 AC-25; story: OS-032 OS-033 OS-050.

Owner role: Runner BE + FE. Reviewer independen belum ditunjuk.

Bukti source: frontend/src/views/runner/ExamRunner.vue:203; frontend/src/views/runner/ExamRunner.vue:349.

Setelah65detik fake time tampilan tetap00:02:00; tidak ada heartbeat. runnerError diisi tetapi tidak dirender. Timer diinisialisasi dari start saja; proctor presence dapat menunjukkan peserta offline walau UI aktif.

Perubahan yang harus dibuat: Countdown dari deadline/server time dengan periodic sync/heartbeat; status offline/expired/loading/error terlihat dan aksesibel; suspend tab/clock change tidak memperpanjang waktu.

Acceptance penutupan: Actual browser background/resume, clock spoof, requestfail dan expiry diuji; proctor menerima heartbeat; server tetap authoritative dan UI tidak menjanjikan waktu tambahan.

Dependensi: CBT-020 Keputusan: REC-05

CBT-019 — Race save-submit menghasilkan ACK yang tidak masuk nilai

P0 · REPRODUCED · OPEN. Area: Runner. SSOT: AC-07 AC-08 AC-10 AC-11; story: OS-031 OS-033 RM-005.

Owner role: Runner BE + FE. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/runner.py:530; backend/app/api/v1/runner.py:1074; backend/app/workers/sweeper.py:10.

Probe real PostgreSQL menghentikan save sebelum INSERT; submit selesai200 lalu save200. Attempt submitted dengan1answer tetapi objective grade0. Autosave tidak mengunci attempt sedangkan submit mengunci, sehingga tidak berada pada serialisasi yang sama.

Perubahan yang harus dibuat: Semua save/submit/sweep/recovery memakai lock/order transaksi bersama; cek status+generation+server deadline setelah lock; grade dan receipt menggunakan committed answer set yang sama.

Acceptance penutupan: Barrier concurrency dua connection: save menang -> masuk grade; submit menang -> new save ditolak. Tidak ada successful ACK yang hilang dari final set, duplicate receipt/grade, atau deadlock tak tertangani.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-05

CBT-020 — Deadline dan idempotent replay belum dipisahkan dari new write

P0 · REPRODUCED · OPEN. Area: Runner. SSOT: AC-07 AC-08; story: OS-031 OS-033 RM-005.

Owner role: Runner BE + FE. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/runner.py:530.

Retry payload/key yang sudah mendapat200 menjadi400 setelah submit karena status/deadline diperiksa sebelum record idempotency. now diambil sebelum query/lock. Idempotency key optional; concurrent revision/key collision berpotensi500, bukan response deterministik.

Perubahan yang harus dibuat: Setelah auth/scope, replay exact durable ACK tanpa write meski terminal; newwrite wajib key+revision dan clock setelah lock. Conflict409 typed untuk different payload/stale revision.

Acceptance penutupan: ACK retry setelah deadline/submit/restart identik; changed payload409; save yang menunggu lock sampai deadline ditolak; double revision/key tidak500.

Dependensi: CBT-019 Keputusan: REC-05

CBT-021 — Start/resume/recovery belum satu transaksi idempotent

P0 · INFERRED_CODE · OPEN. Area: Runner. SSOT: AC-06 AC-10; story: OS-030 OS-033 RM-004.

Owner role: Runner BE + FE. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/runner.py:349; backend/app/api/v1/proctor.py:413; backend/app/models/attempt.py:8.

Start check-then-insert tanpa lock; DB unique mencegah duplikasi tetapi racing request dapat500. Resume/device binding memakai mutable state tanpa serialisasi seluruh lifecycle. Dampak race belum direproduksi pada audit ini.

Perubahan yang harus dibuat: Lock enrollment-session dan generation; stable start idempotency; handle unique conflict dengan canonical attempt; recovery memiliki reason, one-use grant dan deadline sama.

Acceptance penutupan: Dua start simultan menghasilkan satu attempt/snapshot dan response deterministic; recovery vs stale-device save/submit diuji; token lama segera gagal; deadline tidak berubah.

Dependensi: CBT-004 CBT-008 CBT-019 Keputusan: Implementasi baseline yang sudah disetujui.

CBT-022 — Sweeper deadline belum terpasang sebagai layanan terjadwal

P0 · CONFIRMED_CODE · OPEN. Area: Runner. SSOT: AC-08 AC-10 AC-24; story: OS-033 OS-011.

Owner role: Runner BE + FE. Reviewer independen belum ditunjuk.

Bukti source: backend/app/workers/sweeper.py:125; backend/app/workers/celery_app.py.

Fungsi sweep tersedia dan dites dengan pemanggilan langsung; tidak ditemukan task/beat/scheduler operasional yang memanggilnya di source. Automatic finalization saat peserta hilang tidak terbukti berjalan.

Perubahan yang harus dibuat: Daftarkan periodic task durable dengan batch/skip-locked, retry/restart, overdue metric dan alarm; service definition wajib bagian deployment.

Acceptance penutupan: Peserta tutup browser; setelah deadline attempt difinalisasi tanpa HTTP peserta; kill/restart worker dan dua worker tidak menduplikasi; overdue backlog membunyikan alarm.

Dependensi: CBT-019 Keputusan: REC-05

CBT-023 — Receipt dan layar terminal belum memenuhi alur peserta

P1 · CONFIRMED_CODE · OPEN. Area: Runner. SSOT: AC-10 AC-18 AC-25; story: OS-033 RM-005.

Owner role: Runner BE + FE. Reviewer independen belum ditunjuk.

Bukti source: frontend/src/views/runner/ExamRunner.vue:264; backend/app/api/v1/runner.py:349; backend/app/workers/sweeper.py:112.

Submit UI mengabaikan payload receipt, hanya mengganti status; input/polling/camera tetap. Refresh completed start menjadi400. receipt_hash berisi attempt/enrollment/time/count, belum hash authoritative answer revisions/content.

Perubahan yang harus dibuat: Read-only submitted view dan receipt lookup yang dapat dipulihkan; stop capture/edits; receipt mengikat final answer set+policy checksums tanpa membuka jawaban ke publik.

Acceptance penutupan: Submit/auto-submit/refresh/network timeout menunjukkan receipt sama; terminal inputdisabled; hash berubah jika final content/revision berubah dan dapat diverifikasi.

Dependensi: CBT-017 CBT-019 Keputusan: Implementasi baseline yang sudah disetujui.

CBT-024 — Readiness dapat lulus tanpa pengukuran perangkat

P0 · REPRODUCED · OPEN. Area: Secure. SSOT: AC-12 CAM-01; story: OS-040 OS-004.

Owner role: Security + Windows. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/secure.py:76; frontend/src/views/runner/ReadinessCheck.vue:299; launcher/src/Services/HardwareCheckService.cs.

POST readiness {} menghasilkan can_proceed=true dari default baik. FE menebak build/SEB via query/UA dan camera unknown dapat ready. Native memeriksa versi mayor/arsitektur/WMI camera, belum semua RAM/build/permission requirements. Readiness tidak mengikat admission.

Perubahan yang harus dibuat: Bedakan measured/unknown/failed; unknown tidak lulus requirement wajib. Satukan policy minimum, native measurements dan real SEB camera test; bind laporan ke launch/enrollment/policy dengan expiry.

Acceptance penutupan: Unsupported build/RAM, missing/busy/denied camera, fabricated query/defaults tidak ready; dua perangkat per approved OS dengan support/remediation flow terdokumentasi.

Dependensi: CBT-006 Keputusan: REC-06

CBT-025 — ConfigKey dapat diturunkan dari config sehingga browser biasa diterima

P0 · REPRODUCED · OPEN. Area: Secure. SSOT: AC-13 AC-06; story: OS-041 OS-042.

Owner role: Security + Windows. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/secure.py:563; backend/app/api/v1/secure.py:600; backend/app/core/seb_configuration.py; backend/app/api/v1/runner.py:267.

Klien HTTP biasa download plaintext plist, hitung ConfigKey/hash URL, redeem200 dan start200 tanpa header SEB. Verification hanya flag JWT hasil handoff, bukan validasi konteks per request. browser_exam_key/min_seb_version/allowed_os pada config belum menegakkan binary/platform aktual.

Perubahan yang harus dibuat: Review threat model berdasarkan mekanisme resmi SEB: protected config, pinned approved BEK/config/version, exam-bound handoff dan validasi request sesuai integrasi yang teruji. Jangan memperlakukan ConfigKey checksum sebagai attestation atau secret. Audit bypass harus gagal sebelum I4.

Acceptance penutupan: Replay probe ordinary HTTP harus ditolak; wrong binary/config/version/enrollment/device/session, copied bearer, revoked config dan direct browser negatif. Bukti positif actual signed launcher->SEB->runner pada Windows.

Dependensi: CBT-004 CBT-024 Keputusan: REC-06

CBT-026 — Supply chain launcher dan OS matrix belum tersertifikasi

P0 · CONFIRMED_CODE_AND_NOT_VERIFIED · OPEN. Area: Secure. SSOT: AC-12 AC-13 AC-24; story: OS-040 OS-041 OS-071.

Owner role: Security + Windows. Reviewer independen belum ditunjuk.

Bukti source: launcher/src/Services/SebIntegrationService.cs; launcher/src/LauncherConfiguration.cs; .github/workflows; scripts/ops/release_immutable_guards.sh.

Download SEB installer memiliki hash check; installed executable terutama FileVersion, launch via URI shell sehingga path yang diverifikasi tidak otomatis path yang berjalan. Manifest update belum pembuktian trust chain. Pipeline alpha unsigned dan placeholder config bukan production evidence. Actual Windows install/update/uninstall tidak dijalankan.

Perubahan yang harus dibuat: Verifikasi Authenticode/publisher/hash artefak, anti-downgrade signed manifest, URI handler/path integrity; production rejects unsigned. Refresh DEC-02 compatibility/security support lifecycle sebelum pin.

Acceptance penutupan: Tampered binary/manifest/handler/oldversion gagal; install/update/uninstall+rollback pada dua device per OS; artefak persis yang ditandatangani sama dengan download dan executed binary.

Dependensi: CBT-025 Keputusan: REC-06

CBT-027 — TTL dan binding secure authorization berbeda OP-01

P0 · CONFIRMED_CODE · OPEN. Area: Secure. SSOT: AC-06 AC-13; story: OS-030 OS-041 OS-042.

Owner role: Security + Windows. Reviewer independen belum ditunjuk.

Bukti source: backend/app/core/config.py; backend/app/api/v1/secure.py:448; backend/app/core/runner_sessions.py.

Launch TTL120s dan runner240m berbeda approved5m/60m. Launch memilih first frozen session/fallback tanpa target session assignment; runner session tidak membatasi session_id spesifik. Revocation config/policy belum lengkap.

Perubahan yang harus dibuat: Launch5m; runner60m atau deadline dengan renewal yang terikat active device/session agar ujian120m tetap berjalan; sekali pakai handoff. Bind session/form/policy/config generation dan revoke checks.

Acceptance penutupan: Boundary expiry dan60m renewal pada ujian120m diuji; handoff ulang/foreignsession/oldgeneration ditolak tanpa memperpanjang deadline.

Dependensi: CBT-004 CBT-008 CBT-025 Keputusan: REC-06

CBT-028 — Consent, pre-exam still dan camera lifecycle belum terhubung UI

P1 · CONFIRMED_CODE · OPEN. Area: Camera. SSOT: CAM-01 CAM-02 CAM-03 CAM-06; story: OS-064 OS-065 OS-004.

Owner role: Proctoring + Frontend. Reviewer independen belum ditunjuk.

Bukti source: frontend/src/views/runner/ExamRunner.vue:23; backend/app/api/v1/runner.py:779; backend/app/api/v1/runner.py:1036.

Preview getUserMedia ada, tetapi UI tidak memanggil verification-still/consent policy atau camera-event lifecycle. Fallback label memberi kesan camera aktif. Track ended/mute/devicechange belum dilaporkan; endpoint sendiri tidak menjamin flow.

Perubahan yang harus dibuat: Explicit notice+consent policy version, one initial still linked attempt, preview persisten; indikator berdasarkan track nyata dan incident saat denied/mute/unplug, tanpa otomatis misconduct/extension.

Acceptance penutupan: Windows SEB allowed/denied/missing/busy/unplug dan navigasi; satu stillawal, no duplicate reload, consent proof; answer/timer tidak berubah karena camera gagal.

Dependensi: CBT-024 CBT-030 Keputusan: REC-07

CBT-029 — Capture periodic/random belum server-scheduled

P1 · CONFIRMED_CODE · OPEN. Area: Camera. SSOT: CAM-04 CAM-05; story: OS-065.

Owner role: Proctoring + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/proctor.py:824; backend/app/api/v1/runner.py:902; backend/app/workers/celery_app.py.

Challenge tersedia atas permintaan proctor, belum scheduler random server-controlled. Action request_capture umum hanya log, berbeda endpoint request-capture yang membuat challenge. Belum budget/rate limit lintas trigger.

Perubahan yang harus dibuat: Satu service challenge untuk periodic/manual/event, jadwal rahasia server dan persisted budget; schedule survive restart; correlation trigger-upload-timeout.

Acceptance penutupan: Server menghasilkan capture di dalam cadence/budget approved; manual+periodic concurrent tidak melewati cap; retry/restart/replay tidak menggandakan challenge/evidence.

Dependensi: CBT-030 CBT-046 Keputusan: REC-07

CBT-030 — Upload menerima challenge palsu, bukan JPEG, melebihi kuota/ukuran

P0 · REPRODUCED · OPEN. Area: Camera. SSOT: CAM-03 CAM-05 CAM-07 CAM-08; story: OS-065 RM-008.

Owner role: Proctoring + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/runner.py:947; backend/app/api/v1/runner.py:779; backend/app/core/evidence_storage.py.

Tujuh upload valid-base64 tetapi bukan JPEG dengan challenge nonexistent diterima200; payload decoded1048577bytes juga200. Challenge optional/tidak harus ada, fulfilled/expiry tidak enforced; evidence_type bebas dan paused attempt diterima.

Perubahan yang harus dibuat: Mandatory one-use challenge/presigned authorization2m terikat attempt/device/type/policy; decode JPEG+pixel/byte limits, server quota, idempotent finalize, trusted server timestamps. Validasi lifecycle.

Acceptance penutupan: No/unknown/expired/replayed/crossattempt challenge, nonJPEG/oversize/7th disallowed capture ditolak; duplicate same upload mengembalikan metadata sama; orphan upload direkonsiliasi.

Dependensi: CBT-004 Keputusan: REC-07

CBT-031 — Isolasi storage outage dari autosave belum dibuktikan/desain belum bounded

P0 · CONFIRMED_CODE_AND_NOT_VERIFIED · OPEN. Area: Camera. SSOT: AC-11 CAM-07; story: OS-065 OS-070.

Owner role: Proctoring + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/core/evidence_storage.py; backend/app/api/v1/runner.py:779; backend/app/api/v1/runner.py:947.

S3 upload synchronous dalam request dengan resource API/DB; belum konfigurasi timeout15s/retry3/bulkhead sesuai policy. Header test dapat menginjeksi503 tetapi tidak menguji timeout/pool saturation storage nyata.

Perubahan yang harus dibuat: Upload terpisah dengan signed bounded authorization; isolasi pool/worker dan backpressure, timeout/retry3 serta bounded client queue. Nonproduction fault hook dibatasi environment.

Acceptance penutupan: Real S3 hang/slow/503 pada peakcapture tidak menghilangkan ACK atau mengubah deadline; autosave memenuhi SLO, memory/backlog bounded dan failure tampil di proctor.

Dependensi: CBT-030 CBT-046 Keputusan: REC-07

CBT-032 — Akses evidence terlalu luas dan integrity read belum diverifikasi

P0 · CONFIRMED_CODE · OPEN. Area: Evidence. SSOT: CAM-03 CAM-08 AC-15; story: RM-008 OS-071.

Owner role: Security + Platform. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/proctor.py:123; backend/app/api/v1/proctor.py:869; backend/app/api/v1/runner.py:779.

Assigned proctor scope dan grader deny sudah ada; manager-role shortcut mengizinkan staff tanpa evidence-viewer assignment. Read mengaudit akses tetapi belum membandingkan content checksum atau seluruh tombstone lifecycle.

Perubahan yang harus dibuat: Evidence capability+assignment terpisah dari management/scoring; purpose/reason audit untuk reviewer incident; verify metadata/content digest dan deny deleted/held policy mismatch.

Acceptance penutupan: Competition admin tanpa assignment ditolak; crossroom/tenant/attempt, grader/reviewer biasa, revoked assignment dan tombstone denied; corrupted object terdeteksi.

Dependensi: CBT-003 CBT-030 Keputusan: REC-02 REC-07

CBT-033 — Retention90hari dari capture bertentangan30hari setelah dispute

P0 · CONFIRMED_CODE · OPEN. Area: Evidence. SSOT: CAM-09 AC-23; story: RM-008 OS-072 OS-090.

Owner role: Security + Platform. Reviewer independen belum ditunjuk.

Bukti source: scripts/ops/retention_lifecycle_sweep.py:21; backend/app/core/evidence_storage.py.

Default90hari berdasarkan captured_at berbeda DEC-08. Hold field belum workflow owner+reason; delete object biasa belum inventaris version/backup. External delete dan DB commit dapat terpisah tanpa rekonsiliasi/restore tombstone.

Perubahan yang harus dibuat: Policy per event: dispute_close+30hari, manual legal hold diaudit; idempotent purge inventory seluruh versi/derivatif/export/backup sesuai policy, deletion journal dan reconciliation sesudah restore.

Acceptance penutupan: Expiryboundary/hold/release/retry/crash di setiap langkah, versioned bucket dan restore backup diuji; objek terhapus tidak hidup kembali dan held evidence tidak hilang.

Dependensi: CBT-030 CBT-032 Keputusan: REC-07 REC-09

CBT-034 — Monitoring belum stabil saat reconnect/poll dan status peserta kurang

P1 · CONFIRMED_CODE · OPEN. Area: Proctor. SSOT: AC-14 CAM-02; story: OS-050.

Owner role: Proctoring + Operations. Reviewer independen belum ditunjuk.

Bukti source: frontend/src/views/proctor/ProctorDashboard.vue; backend/app/api/v1/proctor.py:194; frontend/src/views/runner/ExamRunner.vue.

Polling memanggil switchRoom yang mengosongkan timeline/evidence setiap15s sehingga detail yang sedang diperiksa tertutup. Backend punya sebagian presence/remaining tetapi UI belum semua; heartbeat runner belum berjalan.

Perubahan yang harus dibuat: Refresh data tanpa reset selectedroom/timeline/modal; bedakan connected/presence/lifecycle/camera facts, reconnect rebuild dari authoritative DB.

Acceptance penutupan: Proctor membuka evidence lebih30s tetap stabil; room-switch race, Redisloss/reconnect dan participant heartbeat diuji; tidak menampilkan jawaban/key.

Dependensi: CBT-005 CBT-018 Keputusan: Implementasi baseline yang sudah disetujui.

CBT-035 — Pause melanggar D06; incident/authority belum utuh

P0 · REPRODUCED · OPEN. Area: Proctor. SSOT: AC-10 AC-15 AC-27 CAM-10; story: OS-033 OS-051 OS-066.

Owner role: Proctoring + Operations. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/proctor.py:521; frontend/src/views/proctor/ProctorDashboard.vue.

pause_attempt diterima200; resume tersedia walau D06 melarang pause. Manager force-submit belum endpoint khusus; warning hanya log tanpa participant delivery/ack. UI disposition langsung resolved; penalty/response/appeal authority belum lifecycle tersendiri.

Perubahan yang harus dibuat: Hapus pause/resume dari release surface, tetap fixeddeadline. Incident states observation/action/response/disposition; recovery/force-submit manager only, penalty named capability, reason+audit+idempotency.

Acceptance penutupan: Proctor biasa tidak force-submit/penalty; warning diterima dan tercatat respons peserta; incident tidak otomatis resolved; recovery/massoutage tidak mengubah deadline.

Dependensi: CBT-003 CBT-019 CBT-045 Keputusan: REC-08 REC-09

CBT-036 — Zoom reference memiliki fallback palsu dan scope lemah

P0 · CONFIRMED_CODE · OPEN. Area: Proctor. SSOT: AC-16; story: OS-052 OS-066.

Owner role: Proctoring + Operations. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/runner.py:863; backend/app/api/v1/events.py:44; frontend/src/views/runner/ExamRunner.vue:150.

RoomZoom fallback ke first room ketika unassigned; UI fallback meeting/passcode hardcoded. Room output mengekspos virtual_link ke reader event termasuk author. Konfigurasi meeting/passcode/instructions tidak punya alur API/UI lengkap.

Perubahan yang harus dibuat: Hanya assigned participant/proctor/event command capability memperoleh Zoom ref; hapus fallback dan dummy data; form room secrets terpisah, redacted logs/export.

Acceptance penutupan: Peserta unassigned/author/grader/crossroom gagal membaca link/passcode; assigned user mendapat konfigurasi nyata; rehearsal smartphone+SEB dan failure escalation dicatat.

Dependensi: CBT-003 CBT-008 Keputusan: REC-08

CBT-037 — Concurrent grading/moderation belum mengikat revision yang dibaca

P0 · INFERRED_CODE · OPEN. Area: Grading. SSOT: AC-17 AC-19; story: OS-060 RM-006.

Owner role: Grading + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/grading.py:256; backend/app/api/v1/grading.py:406; backend/app/models/attempt.py:GradeRevision.

Grade revision max+1 dan moderation latest row tanpa lock/expectedrevision; unique constraint revision belum ada. Dua submit atau stale reviewer dapat menilai/approve versi berbeda dari yang dilihat. Concurrent outcome belum direproduksi.

Perubahan yang harus dibuat: Task lock+expectedrevision+idempotency dan DB unique attempt/item/revision; moderation menyebut exact grade hash/revision; rejected409 jika berubah.

Acceptance penutupan: Barrier doublegrader/reviewer/reopen bersaing tidak duplicate; stale moderation409; reviewer berbeda, hanya assigned dan submitted tetap enforced.

Dependensi: CBT-014 Keputusan: REC-10

CBT-038 — Reopen task dan pembagian beban belum menjadi workflow lengkap

P1 · CONFIRMED_CODE · OPEN. Area: Grading. SSOT: AC-17 AC-19; story: OS-060 OS-073.

Owner role: Grading + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/grading.py:81; backend/app/api/v1/grading.py:147; backend/app/api/v1/grading.py:175; frontend/src/views/grading/BlindGradingView.vue.

Reopen mengubah task pending tetapi queue memakai latest_grade.is_moderated; form UI disembunyikan untuk moderated sehingga reopened item tidak dapat dinilai dari flow biasa. Prepare memakai satu pasangan grader/reviewer dan tidak reassign existing task.

Perubahan yang harus dibuat: Queue/UI mengikuti task revision state; reopen/reassign punya reason+audit dan revoke stale capability; distribusi roster/capacity per item dengan blind calibration.

Acceptance penutupan: Grade->moderate->reopen->regrade->review->republish dari UI; grader/reviewer diganti tidak melihat item lama; 100% essays dimoderasi sesuai roster dan deadline.

Dependensi: CBT-005 CBT-037 Keputusan: REC-10

CBT-039 — Revised score tidak konsisten dengan rincian kriteria

P0 · CONFIRMED_CODE · OPEN. Area: Grading. SSOT: AC-17 AC-18; story: OS-060 RM-006.

Owner role: Grading + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/grading.py:406.

Reviewer revise dapat mengganti score tetapi menyalin criteria_scores_json sebelumnya tanpa perhitungan ulang. Total result dan rincian rubric kemudian berbeda walau is_moderated=true.

Perubahan yang harus dibuat: Reviewer revisi kriteria lengkap dengan reason; hitung total dari rubric snapshot. Jika override diizinkan customer, simpan komponen override terpisah dengan explicit authority, bukan menyamarkan total.

Acceptance penutupan: Total final sama dengan rumus/rincian setiap revision; outofrange/NaN/unknowncriteria ditolak; semua riwayat dan reason terbaca tanpa PII grader queue.

Dependensi: CBT-014 CBT-037 Keputusan: REC-04 REC-10

CBT-040 — Publikasi dapat mengabaikan attempt yang masih aktif

P0 · REPRODUCED · OPEN. Area: Results. SSOT: AC-18 AC-19; story: OS-061 OS-062 RM-009.

Owner role: Results + Frontend. Reviewer independen belum ditunjuk.

Owner role: Results + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/results.py:147; backend/app/api/v1/results.py:188; backend/app/api/v1/results.py:249.

Satu submitted dan satu in_progress: request/approve/publish tetap200; ongoing attempt dikeluarkan dari dataset. Belum closure gate terhadap semua enrolled assignments/no-show/incidents/disqualification/complete objective grades.

Perubahan yang harus dibuat: Finalization manifest seluruh eligible participants dan disposition; semua attempt terminal, semua grading valid/moderated, incident consequential resolved sebelum freeze ranking. Snapshot mencakup policy+input revision digests.

Acceptance penutupan: Ongoing/overdue/ungraded/missinggrade/unresolvedincident memblokir; no-show/disqualified diperlakukan menurut approvedpolicy; jumlah manifest direkonsiliasi sebelum ranking.

Dependensi: CBT-008 CBT-019 CBT-035 CBT-039 Keputusan: REC-09

CBT-041 — Approval belum mengikat visibility dan preview kandidat

P0 · REPRODUCED · OPEN. Area: Results. SSOT: AC-18 AC-19; story: OS-061 OS-062 RM-009.

Owner role: Results + Frontend. Reviewer independen belum ditunjuk.

Owner role: Results + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/results.py:27; backend/app/api/v1/results.py:188; frontend/src/views/organizer/ResultsView.vue.

Approval hanya hash ranking; publish payload is_public dapat diubah tanpa approval. Probe approve lalu publish public berhasil dan anonymous public endpoint200. Approver belum mendapatkan frozen candidate detail; layar ranking mengandalkan existing publication.

Perubahan yang harus dibuat: Immutable typed publication candidate dengan scope/visibility/policy/input digests/rows; approver melihat preview candidate itu dan menyetujui exact hash; publisher berbeda tidak bisa mengubah atribut.

Acceptance penutupan: Approve private lalu publish public ditolak; change score/visibility/identity invalidatesapproval; preparer tidak selfapprove; first-publication preview dapat diverifikasi owner.

Dependensi: CBT-040 Keputusan: REC-09

CBT-042 — Publication concurrency, withdrawal dan riwayat belum lengkap

P0 · INFERRED_CODE · OPEN. Area: Results. SSOT: AC-18 AC-19; story: OS-061 OS-062 RM-009.

Owner role: Results + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/results.py:249; backend/app/api/v1/results.py:388; backend/app/models/attempt.py.

Supersession dasar ada, tetapi tidak ada serialization/unique active-version yang menjamin concurrentpublish tunggal. UI/API history terutama summary, belum retrieve/export exact historical rows dan withdrawal procedure. Race belum diuji audit ini.

Perubahan yang harus dibuat: Session publication lock, unique version+oneactive, idempotent publish/withdraw reason, immutable approval link dan historical endpoint/export; correction menghasilkan versi baru.

Acceptance penutupan: Concurrentpublish satu active/version; withdraw tidak menghapus history; export versi1 tetap identik sesudah versi2/regrade; staleapproval dan retry deterministik.

Dependensi: CBT-041 Keputusan: REC-09

CBT-043 — Peserta belum punya akses aman ke own published result

P1 · CONFIRMED_CODE · OPEN. Area: Results. SSOT: AC-19 AC-25; story: OS-062.

Owner role: Results + Frontend. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/results.py:369; frontend/src/router/index.ts.

Ada staff rankings dan optional public rankings; tidak ada runner own-result endpoint/view. Akses hasil setelah runner expired belum dirancang pada eventcredential flow baru.

Perubahan yang harus dibuat: Event-scoped result portal dengan credential verification baru/session read-only singkat; hanya own published result/receipt/dispute instructions. Jangan menambah akun siswa global.

Acceptance penutupan: Sesudah ujian+tokenexpire peserta dapat membaca own published result; wrongcredential/draft/otherparticipant ditolak; withdrawal/supersession jelas.

Dependensi: CBT-004 CBT-041 Keputusan: REC-09

CBT-044 — Export belum lengkap, async dan private lifecycle

P1 · CONFIRMED_CODE · OPEN. Area: Reporting. SSOT: AC-20 CAM-09; story: OS-063.

Owner role: Reporting + Platform. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/results.py:455; backend/app/api/v1/results.py:509; backend/app/api/v1/results.py:571; backend/app/workers/celery_app.py.

CSV formula escaping ada; hasil/attendance/incident synchronous. Attendance berbasis Attempt sehingga no-show hilang; incident export ProctorAction tidak mencakup log-incident AuditEvent. Audit export belum tersedia; belum private async job/expiry/delete dan metadata lintas report lengkap.

Perubahan yang harus dibuat: Export authoritative roster+manifest, unified incident timeline dan audit sesuai scope; async version-bound job, private download expiry+audit+retention.

Acceptance penutupan: No-show/incident kedua jalur lengkap; historical result version tepat; wrongscope/expiredlink denied; exportfailure tidak mengganggu autosave; formula injection tetap aman.

Dependensi: CBT-008 CBT-040 CBT-045 CBT-046 Keputusan: REC-09

CBT-045 — Audit trail belum mencakup seluruh perubahan konsekuensial

P0 · CONFIRMED_CODE · OPEN. Area: Audit. SSOT: AC-01 AC-05 AC-15 AC-17 AC-20 CAM-10; story: OS-011 OS-051 OS-060 OS-063.

Owner role: Platform + Security. Reviewer independen belum ditunjuk.

Bukti source: backend/app/models/audit.py; backend/app/api/v1/auth.py; backend/app/api/v1/participants.py:422; backend/app/api/v1/forms.py:252; backend/app/api/v1/grading.py:406; backend/app/api/v1/results.py:208.

Beberapa attempt/proctor/export/evidence events dicatat, tetapi auth recovery/credential rotation, authoring freeze/edit, grading/moderation dan approval belum lengkap actor/reason/correlation. Header correlation belum menjamin event chain, dan audit immutability operasional belum terbukti.

Perubahan yang harus dibuat: Transactional audit schema actor/scope/action/reason/old-new digest/requestID/policy; redact secrets/answers/images; append-only permissions+retention dan scoped audit UI/export.

Acceptance penutupan: Tiap critical action menghasilkan satu audit setelah commit, rollback tidakfalseevent; search case end-to-end sampai result; unauthorized audit write/delete denied dan sensitive payload redacted.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-02

CBT-046 — Outbox belum menghasilkan efek bisnis nyata

P1 · CONFIRMED_CODE · OPEN. Area: Workers. SSOT: AC-11 AC-20 AC-24; story: OS-012 OS-063.

Owner role: Platform. Reviewer independen belum ditunjuk.

Bukti source: backend/app/core/outbox.py; backend/app/workers/outbox.py; backend/app/workers/celery_app.py.

Outbox helper/dispatcher ada; business routes belum enqueue event transaksional. Dispatcher menandai published tanpa delivery yang sebenarnya; export worker masih placeholder.

Perubahan yang harus dibuat: Satu outbox implementation, domain enqueue dalam transaction, consumer idempotent dengan delivery/retry/backoff/deadletter/metrics; tandai delivered hanya sesudah efek terkonfirmasi.

Acceptance penutupan: Crash sebelum/sesudah delivery tidak kehilangan/duplikasi efek; replay dan dependencydown tertangani; pendingage/deadletter observable.

Dependensi: CBT-045 Keputusan: Implementasi baseline yang sudah disetujui.

CBT-047 — Contract dan migrasi belum diverifikasi dengan jalur production sebenarnya

P0 · CONFIRMED_CODE · OPEN. Area: Quality. SSOT: AC-21; story: OS-010 OS-012 RM-001 RM-010.

Owner role: QA + Platform. Reviewer independen belum ditunjuk.

Bukti source: scripts/ops/openapi_runtime_drift_check.py; tests/conftest.py:21; backend/alembic/versions; .github/workflows/backoffice-ci.yml.

Strict route drift PASS108 hanya method/path. Test fixture memakai create_all dan beberapa suite drop_all/create_all sehingga bukan schema hasil migrasi murni. Migrasi penghapusan inline evidence tidak memiliki backfill gate; downgrade menambah kolom kosong.

Perubahan yang harus dibuat: Schema/DTO/status/security parity tests dan generated typed client; integration migration-only; upgrade old data+constraints+rollback/forwardfix. Bukti inline evidence terkonversi sebelum destructive migration, atau stop.

Acceptance penutupan: Fresh dan realisticoldDB upgrade lulus tanpa create_all; constraint parity; malformedresponse/securityschema drift gagalCI; historical evidence tidak hilang.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-11

CBT-048 — Belum bukti browser E2E penuh dan aksesibilitas

P1 · CONFIRMED_CODE_AND_NOT_VERIFIED · OPEN. Area: Quality. SSOT: AC-09 AC-12 AC-25 CAM-01 CAM-02; story: OS-073 RM-010.

Owner role: QA + Platform. Reviewer independen belum ditunjuk.

Bukti source: frontend/tests/unit; tests/integration; frontend/src/views; docs/specs/acceptance-matrix.md.

8 frontend tests mencakup API/auth/router/safeHTML, bukan role journeys. Accessibility assertions yang memeriksa marker source bukan keyboard/screenreader. Lima componentprobes audit menemukan bug UI dengan fetch mock, belum actual browser/API.

Perubahan yang harus dibuat: Suite browser melawan API/DB nyata per role+fullparticipant journey; accessibility WCAG2.2AA criticalflows dan manual supportedWindows/SEB; typed fixtures tanpa mocking bisnis.

Acceptance penutupan: Journey di matriks audit lulus, termasuk keyboard/focus/error/status, reconnect, zoom/font dan media; actual assistive tech dan accommodation rehearsal didokumentasikan.

Dependensi: CBT-005 CBT-016 CBT-018 CBT-028 CBT-043 Keputusan: REC-12

CBT-049 — 500 concurrent120menit dan750 headroom belum terbukti

P0 · CONFIRMED_CODE_AND_NOT_VERIFIED · OPEN. Area: Capacity. SSOT: AC-11 AC-22 CAM-07; story: OS-070.

Owner role: QA + Platform. Reviewer independen belum ditunjuk.

Bukti source: tests/load/k6_500_concurrent.js:17; tests/load/k6_750_headroom.js:16; tests/integration/test_os070_scaled_workload_and_resilience.py.

k6 baseline hold3m, headroom2m; iteration auth/start/save/submit dapat mengulang peserta terminal, bukan500 active120m. In-process scaled test bukan fullstack capacity. Dua fullrun120m dan75015m tidak dijalankan audit.

Perubahan yang harus dibuat: Perbaiki model unique activeattempts100mixeditems, camera/proctor/worker contention dan failure waves; stagingisolated quotas; ukur denominator/ACK/receipts dan resource saturation.

Acceptance penutupan: Dua500active120m +75015m pada exactcandidate; autosavep95<=1s p99<=3s unexpected5xx<0.1%; nolACKloss restartAPI/worker/Redis dan no duplicate receipt; semua rawartifact disimpan.

Dependensi: CBT-017 CBT-019 CBT-022 CBT-031 CBT-051 Keputusan: REC-13

CBT-050 — DR drill belum membuktikan PITR dan restore content lengkap

P0 · CONFIRMED_CODE_AND_NOT_VERIFIED · OPEN. Area: Recovery. SSOT: AC-23 AC-27 CAM-09; story: OS-072 OS-073.

Owner role: Platform + Operations. Reviewer independen belum ditunjuk.

Bukti source: scripts/ops/dr_restore_drill.py; tests/integration/test_os072_pitr_restore_and_retention.py; docs/runbooks/disaster-recovery.md.

Tool logical dump/restore + rowcount/sample tidak membuktikan WAL point-in-time, objectmedia/keys/tombstones dan recoveredapp integrity. Tidak ada drill exactcandidate yang dijalankan audit.

Perubahan yang harus dibuat: Isolated basebackup+WAL/PITR atau approved equivalent, offhost backup, restore DB+objects+config/keys serta deletionjournal; validate ACK/grade/publication dan incidentauthority sebelum resume.

Acceptance penutupan: Measured RPO<=5m RTO<=60m dengan chosen timestamp/content; bootrecoveredapp+auth+receipt/evidence check; data-loss tidak autoresume/extend; olddeleted evidence tidak reappears.

Dependensi: CBT-033 CBT-045 CBT-052 Keputusan: REC-13

CBT-051 — Monitoring/alerting belum mengukur invariants ujian

P0 · CONFIRMED_CODE_AND_NOT_VERIFIED · OPEN. Area: Operations. SSOT: AC-11 AC-24; story: OS-011 OS-072.

Owner role: Platform + Operations. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/health.py:14; backend/app/core/logging.py; backend/app/main.py; docs/specs/observability-and-alerting.md.

Health/metrics dasar ada; belum dependency readiness dan metric latency/error/overdue sweeper/capture/outbox/PITRlag lengkap. Structured logging helper belum menjamin correlation/redaction di seluruh request/exception/worker. Alert delivery dan oncall belum diuji.

Perubahan yang harus dibuat: Readiness probes terpisah dari liveness; eventmetrics/dashboard, redacted contextual logs, alert rules+runbook+owner; audit querytoken exclusion pada reverseproxy.

Acceptance penutupan: Injected DB/worker/storage/API/backup failure terdeteksi dan alert diterima namedoncall; troubleshoot satu attempt via correlation tanpa PII/secret; health tidak membocorkan exception detail.

Dependensi: CBT-022 CBT-045 CBT-046 Keputusan: REC-13

CBT-052 — Immutable identity dan rollback belum sertifikasi served candidate

P0 · CONFIRMED_CODE_AND_NOT_VERIFIED · OPEN. Area: Release. SSOT: AC-13 AC-21 AC-24; story: RM-012 OS-071 OS-072.

Owner role: Platform + Security. Reviewer independen belum ditunjuk.

Bukti source: scripts/ops/release_immutable_guards.sh; docs/pilot/pilot-readiness-checklist.md; .github/workflows.

Guard memakai repo/sourceheads dan nonempty signing thumbprint, bukan cryptographic proof binary served atau DB applied migration. Path-dependent hashes bukan portable identity. Historical manifest/PASS tidak mengesahkan HEAD audit. Tidak memeriksa deployment live pada sesi ini.

Perubahan yang harus dibuat: Content-addressed FE/BE/launcher/config/policy manifests; verify signature; authenticated servedbuild+DBrevision probes; migration-aware rollback/forwardfix dan backup. Deploy satu exact certified candidate melalui workflow terotorisasi.

Acceptance penutupan: Browser servedassets/API/DB/launcher identik manifest; tamper/stalemanifest/unsigned/migrationmismatch failclosed; rollback rehearsal tidak kehilangan jawaban atau merusak schema.

Dependensi: CBT-026 CBT-047 Keputusan: REC-11 REC-13

CBT-053 — Keputusan customer, operasi dan UAT masih prerequisite terbuka

P0 · REQUIRES_BUSINESS_CONFIRMATION · OPEN. Area: Governance. SSOT: AC-01 AC-17 AC-19 AC-24 AC-27 CAM-09 CAM-10; story: OS-066 OS-073 OS-080 OS-090.

Owner role: PO + Customer. Reviewer independen belum ditunjuk.

Bukti source: docs/specs/README.md:1; docs/runbooks/grading-capacity-plan.md; docs/pilot/uat-signoff-template.md.

DEC-01/03/04/12, OP-02/03 masih OPEN; named publisher/penaltyauthority, actualeventprofile, gradingcapacity/resultsdate/disputewindow/errataretest belum disahkan. Dokumen template dan technicalalpha bukan customeracceptance.

Perubahan yang harus dibuat: Putuskan rekomendasi dalam register pendamping, owner bernama+tanggal; rehearsal proctor1:25 backup1:100 dan100% moderation; signoff exactcandidate, support/incident/closeout ownership.

Acceptance penutupan: Tidak ada nilai relevan OPEN saat gate jatuh tempo; UAT semua role dan signed result/dispute/retest/retention SOP; go-live authorization terpisah setelah semua blocker ditutup.

Dependensi: CBT-040 CBT-048 CBT-049 CBT-050 Keputusan: REC-03 REC-04 REC-08 REC-09 REC-10 REC-13

CBT-054 — Hardening infrastruktur dan security review candidate belum dibuktikan

P0 · NOT_VERIFIED · OPEN. Area: Security. SSOT: AC-05 AC-13 AC-24 CAM-08; story: OS-071 OS-072.

Owner role: Security + Platform. Reviewer independen belum ditunjuk.

Bukti source: backend/app/core/config.py; backend/app/main.py; docs/specs/observability-and-alerting.md; docs/pilot/pilot-readiness-checklist.md.

Config sudah menolak beberapa production defaults dan memory evidence; itu belum bukti servedTLS, storage SSE/ACL, secretrotation, CSP/securityheaders, dependency/image/launcher scan atau independent review candidate. DEBUG/HTTPS policy perlu failclosed yang sesuai deployment. Liveinfra tidak diuji.

Perubahan yang harus dibuat: Threat model ujian+tenant+endpoint+launcher; enforce production config, secureheaders dan secretmanagement; dependency/SAST/DAST+manual abuse tests; internal docs/evidence tidak dapat diakses publik.

Acceptance penutupan: Exactcandidate scans direview, seluruh critical/high releaseimpact closed; externalnegative TLS/storage/docs/access tests dan privilegedsession tests lulus dengan artifactidentities, tanpa mengekspos data nyata.

Dependensi: CBT-001 CBT-025 CBT-030 CBT-032 CBT-047 Keputusan: REC-01 REC-06 REC-13

CBT-055 — Lookup PIN dan launch belum memiliki anti-bruteforce terdistribusi

P0 · CONFIRMED_CODE · OPEN. Area: Identity. SSOT: AC-05 AC-06 AC-13; story: OS-020 OS-030 OS-041 RM-002.

Owner role: Identity + Security. Reviewer independen belum ditunjuk.

Bukti source: backend/app/api/v1/runner.py:298; backend/app/api/v1/secure.py:448; docs/specs/participant-access-decision.md.

Lookup membedakan event tidak ada404, ID tidak ada401, PIN salah401 dan enrollment revoked403; launch juga membedakan status. Tidak ditemukan distributed throttle/progressive delay pada kedua jalur. Ini bertentangan dengan participant-access decision 19 September.

Perubahan yang harus dibuat: Gunakan generic failure pada credential admission, distributed counters per IP/event/credential dengan progressive delay, temporary lock dan audited organizer reset. Limit issuance session dan support-code probing tanpa membuka identitas.

Acceptance penutupan: Multiworker repeated wrong PIN dibatasi konsisten; nonexistent/event/ID/PIN/revoked tidak dapat dibedakan melalui response utama; successful login/reset memiliki audit tanpa PIN atau token; outage limiter fail policy teruji.

Dependensi: Tidak ada prasyarat gap lain; ikuti kontrak/SSOT. Keputusan: REC-01