ivo@setyadi:~$ ivo.blogspot.com

# catatan teknis, sejak 2001

CWE-bench v2 Evaluasi Perbaikan Kerentanan LLM

By
Collinear AI merilis 100 tugas deterministik publik untuk menguji kemampuan LLM dalam menambal bug nyata. Setiap tugas mengharuskan model meng-clone repo open-source dan memperbaiki pola CWE spesifik tanpa merusak fitur yang ada. Sistem skor programatik dan lingkungan Docker memungkinkan reproduksi hasil secara lokal tanpa biaya API. Alat ini berguna untuk membandingkan open-weight models dengan API provider saat membangun defensive agents. Datanya bersifat gated di Hugging Face, sehingga pengguna wajib menerima akses sebelum memakai Harbor runner. Benchmark ini tidak bisa menggantikan full penetration testing karena hanya mencakup subset terbatas dari pola kelemahan yang sudah diketahui. sumber: huggingface.co/cwe-bench my other side: setyadi.com
Image

Angka Kematian Global dan Bayang-Bayang Pandemi

2021-08-05 · #Dunia

Angka Kematian Global dan Bayang-Bayang Pandemi

Membaca berita soal perkembangan pandemi ini selalu bikin menghela napas panjang. Berdasarkan data yang dilaporkan Fox News, Amerika Serikat mencatat korban jiwa tertinggi di dunia dengan lebih dari 600.000 kematian, disusul Brasil yang melewati angka 520.000—meskipun di sana situasinya diyakini jauh lebih parah di tengah sikap pemerintahannya yang kerap meremehkan virus.

Secara global, merujuk pada laporan dari Universitas Johns Hopkins, total angka kematian akibat virus ini bahkan telah menyentuh 4 juta jiwa di tengah laju penyebaran varian Delta dan upaya negara-negara yang terus berkejaran melakukan vaksinasi. Angka-angka ini bukan sekadar statistik di atas kertas, melainkan jutaan nyawa manusia yang hilang begitu saja.

Catatan ini semula saya tulis di Facebook, 5 Agustus 2021.

$ cd ~/

$ cat comments/ (0)

← lebih baru lebih lama →