Facebook Umumkan KILT, Benchmark Terpadu untuk NLP

Liputan6.com, Jakarta – Facebook mengumumkan Knowledge Intensive Language Tasks (KILT), sebuah benchmark terpadu baru untuk membantu peneliti di bidang kecerdasan buatan.
KILT diharapkan dapat membantu peneliti membangun model yang lebih mampu memanfaatkan pengetahuan dunia nyata untuk menyelesaikan berbagai tugas.
Mengutip keterangan Facebook, KILT merupakan gabungan dari 11 dataset publik yang banyak digunakan dan mewakili lima jenis tugas berbeda: pengecekan fakta, menjawab pertanyaan domain terbuka, pengisian slot, penautan entitas, dan pembuatan dialog.

“KILT merupakan benchmark pertama yang menggabungkan dataset yang mewakili berbagai macam tugas pengetahuan intensif,” kata perusahaan.
KILT menyatukan 11 dataset dalam satu format dan menempatkannya dalam satu koleksi yang sebelumnya telah diproses dari seluruh korpus di Wikipedia. Pemrosesan awal korpora besar memakan waktu yang dapat berdampak besar pada kinerja hilir model.
“Memetakan semua kumpulan dataset ke satu korpus tidak hanya membuat pekerjaan penelitian di bidang ini lebih nyaman, tetapi juga memungkinkan evaluasi lebih akurat dan seimbang di berbagai model,” ujar perusahaan.
Penyatuan semua dataset ke satu korpus yang sama dalam format terpadu memungkinkan KILT mengeksplorasi pendekatan multitasking dan transfer learning.
“Kami berharap ini akan memungkinkan pengembangan model dan representasi yang dapat digeneralisasi di seluruh rangkaian tugas KILT,” tutur perusahaan.