01.1 Dokumen
PDF, Office, Markdown, HTML, teks dan kod.
Muat naik PDF berteks, dokumen Word, pembentangan, hamparan, data CSV atau TSV, Markdown, HTML, log dan format kod sumber biasa.
LIBRE / Pengetahuan Dapatan dengan bukti Sempadan disengajakan
Pengetahuan
Ketahui dari mana jawapan datang.
Libre menukar dokumen yang boleh anda akses menjadi konteks sembang berguna tanpa memutuskan jawapan daripada sumber. Istilah tepat kekal boleh dicari, padanan semantik meluaskan capaian dan lokasi petikan kekal kelihatan.
- Carian kata kunci secara lalai
- BM25
- Vektor + leksikal apabila diaktifkan
- Hibrid
- Halaman, slaid, helaian, bahagian
- Peringkat sumber
01 Pemasukan
Format berguna mengekalkan tempatnya dalam sumber.
Dokumen lebih berguna apabila petikan masih boleh menyatakan lokasinya. Libre membawa asal berstruktur melalui pengekstrakan dan mengelakkan pemprosesan semula muat naik tidak berubah dalam skop sama.
01.2 Asal
Kekalkan halaman, slaid, helaian atau bahagian.
Pengekstrakan merekod segmen sumber supaya petikan dan panel Sumber dapat mengenal pasti lokasi dakwaan, bukan sekadar nama fail.
01.3 Pemprosesan terbatas
Hurai fail Office tanpa runtime dokumen asli.
DOCX, PPTX dan XLSX dinyahbungkus melalui penghurai terbatas dalam repositori. Byte serupa yang dimuat naik semula ke skop sama dinyahgandakan.
Dokumentasi
02 Dapatan
Cari pengecam dan idea.
Dapatan kata kunci dan semantik menyelesaikan keciciran berbeza. Libre sentiasa menyediakan laluan leksikal dan menggabungkannya dengan kedudukan vektor apabila embedding dikonfigurasi.
02.1 Kata kunci
BM25 sentiasa tersedia.
Pengecam tepat, nama dan istilah jarang boleh diberi kedudukan tanpa model embedding. Jika penjanaan gagal atau dimatikan, carian dokumen diteruskan secara leksikal.
02.2 Hibrid
Gabungkan kedudukan vektor dan leksikal.
Dengan embedding aktif, gabungan kedudukan timbal balik menyatukan kesamaan semantik dengan BM25 supaya jiran semantik kabur tidak mengatasi padanan tepat yang kukuh.
02.3 Kandungan disulitkan
Tiada indeks teks penuh biasa di sebelah teks sifer.
Pemarkahan leksikal berjalan dalam proses pada cebisan dinyahsulit yang boleh diakses peminta. Libre sengaja tidak menyimpan indeks token teks biasa untuk cebisan dokumen disulitkan.
Dokumentasi
03 Jawapan
Gunakan jumlah konteks sumber yang tepat.
Dapatan ialah lalai yang cekap. Apabila tugas benar-benar bergantung pada seluruh fail, perbualan boleh memilih konteks dokumen penuh.
03.1 Petikan
Bawa lokasi sumber ke dalam jawapan.
Petikan diperoleh mengandungi nama sumber, cebisan, skor dan lokasi berstruktur. Panel Sumber mengumpulkan lokasi dipetik di bawah dokumen.
03.2 Mod dokumen penuh
Baca seluruh dokumen diekstrak apabila muat.
Sembang boleh menghantar kandungan diekstrak penuh dan bukannya petikan dipilih. Had token boleh konfigurasi kembali kepada dapatan apabila bahan terlalu besar.
03.3 Alat pengetahuan
Benarkan model mencari dan membaca semasa pusingan.
Alat terbina dalam boleh menyenaraikan dokumen dalam skop, mencari petikan dan membaca tetingkap terbatas supaya model menyiasat fail secara berulang.
Lihat gelung alat Dokumentasi