FOLKBENCH / METODOLOGI

Metodologi dan bukti

Setiap hasil harus menyebutkan sumber, waktu pengukuran, dan batasan buktinya

Terakhir ditinjau

Jenis fakta

Setiap kolom publik diberi jenis sumber. Pernyataan pengelola relay tidak diberi label sebagai fakta terukur.

  • Dokumentasi relay: klaim dalam sumber resmi relay.
  • Pengamatan: fakta yang terlihat di halaman publik atau informasi yang diberikan oleh perwakilan pengelola relay yang berwenang.
  • Pengukuran: hasil yang diperoleh dari eksekusi evaluasi terkendali Folkbench.
  • Perhitungan: nilai yang diturunkan dari fakta tercatat menggunakan rumus berversi.
  • Editorial: konteks atau penjelasan yang ditulis oleh Folkbench.
  • Tidak diketahui: informasi yang belum diverifikasi dan tidak boleh disajikan sebagai kepastian.

Jendela dan batasan pengukuran

Metrik yang dipublikasikan menyebutkan waktu pengukuran, ukuran sampel atau jendela, cakupan protokol, perlakuan terhadap nilai yang hilang, dan batasan yang diketahui. Pengujian singkat tidak mencerminkan ketersediaan permanen. Satu permintaan yang berhasil juga tidak mewakili semua model, wilayah, atau tingkatan akun.

Penilaian dan perbandingan

Harga, latensi, ketersediaan, konsistensi protokol, dan masukan pengguna adalah metrik yang berbeda. Secara default, Folkbench tidak menggabungkannya menjadi satu skor yang tidak dapat dijelaskan. Hasil perhitungan mencantumkan versi rumus dan snapshot input yang digunakan.

Gerbang publikasi

Suatu relay baru masuk ke direktori publik setelah status relay, pembersihan data sensitif pada bukti, versi fakta, dan tinjauan publikasinya memenuhi aturan rilis yang berlaku. Bukti yang berstatus kandidat, ditarik, kedaluwarsa, atau privat bukan merupakan hasil publik.

Koreksi dan reprodusibilitas

Klaim publik yang material harus ditautkan ke catatan sumber atau eksekusi evaluasi. Apabila suatu hasil dipersoalkan, Folkbench meninjau bukti yang dirujuk dan menyimpan catatan audit. Folkbench dapat mengoreksi, menambahkan catatan, menarik, atau menjalankan ulang snapshot yang terdampak.