Dura reruzivo
Zvinyorwa zveruzivo, kukambaira webhusaiti (website crawl) nekukwidza mafaira — kuti chatbot yenyu inodzidza sei ruzivo.
Peji „Dura reruzivo remachatbot – kuwedzera ruzivo" rinobata chikamu chemabasa chakataurwa muURL. Zviri mukati zviripo zvinowedzerwa nemafambiro chaiwo, zvinodiwa nemiganhu inozivikanwa. Ruzivo runogona kuwedzerwa nemaoko, nekucrawla webhusaiti kana nekuisa mafaira. Crawl inobata mapeji anosvika 300 mukati memaminitsi masere, inoremekedza robots.txt uye inogona kumhanya zvakare maawa 24 oga oga. Kuisa mafaira kunogoneka kusvika 100 MB; zvinobatwa chaizvo iPDF, HTML, mavara nezvakabudiswa muWordPress.
Ruzivo runogona kuwedzerwa nemaoko, nekucrawla webhusaiti kana nekuisa faira. Crawl inobata mapeji anosvika 300 mukati memaminitsi masere, inoremekedza `robots.txt` uye inogona kumhanyiswa zvakare maawa 24 oga oga. Faira rinoiswa harifanirwe kupfuura 100 MB; zvinobatwa chaizvo iPDF, HTML, mavara nezvakabudiswa muWordPress.
Dura reruzivo rakaparadzaniswa patenant imwe neimwe. Zvinyorwa zvetenant imwe hazvifanirwe kuoneka mumhinduro dzeimwe tenant. Chatbot inoshandisa zviri mukati chete kana dura reruzivo rabatanidzwa zvakarurama uye sarudzo yeRAG yabatidzwa. RAG yakadzimwa sezvakajairwa pakugadzira bhoti uye inofanira kubatidzwa nemaune.
Crawl isati yaitwa, mapeji akapetwa, ekare kana asina kukodzera pamutemo anofanira kubviswa. Mushure mekugadziriswa, mamiriro anofanira kutariswa wozoedza nemibvunzo chaiyo kana zviri mukati zvakakosha zvichiwanikwa. Crawl yakabudirira inongoreva kuti mapeji akagadziriswa; haivimbisi otomatiki mhando yakanaka yemhinduro.
Paketi reStarter nereYakagadzirirwa rimwe nerimwe rine 1.000 MB yenzvimbo yekuchengetera nezvinyorwa zveruzivo 100. Kubudiswa kwedura reruzivo kwakajairika hakusati kwaitwa. Saka kusati kwadzimwa kana kurongwazve kwakakura, zvinofanira kutariswa kuti ndeapi manyuko ekutanga achiri kuwanikwa kunze kweZentor.
Papeji „Dura reruzivo remachatbot – kuwedzera ruzivo" zvinoreva kuti: zvinyorwa zvipfupi zviripo zvinowedzerwa kuita gwaro rinovimbika, pasina kuvimbisa mikana kunze kwemamiriro echigadzirwa akasimbiswa. Manyuko echokwadi akasimbiswa nekujeka kwemutoro pakati petenant neZentor ndizvo zvinokosha. Kana paine misiyano, nguva dzose taurai URL iyi chaiyo, tenant inobatwa nenhanho yakaonekwa.