InternetArchiveBot

• meta:User talk:InternetArchiveBot (tehniline tugi, boti arendajate poole pöördumiseks kirjuta meta lehele)

---

---

Kirjuta siia, kui sul roboti tööga seoses tähelepanekuid või ettepanekuid.

Roboti kasutuselevõtmine

Eelmisel aastal tehti saatkonnas ettepanek (teema arhiivis) võtta InternetArchiveBot siin vikis kasutusele. Kaniivel on nüüd siinseid malle kohendanud, nii et robotil oleks parem nendega töötada. Kohendasin veel ka roboti häälestust ja olen lasknud robotil viimased kaks päeva käia. Arvan, et roboti võib praeguste sätetega tööle jätta.

Esialgu on robot piirdunud eeskätt olemasolevate (kellegi teise lisatud) arhiivilinkide kohendamisega. Kui robot on hiljem jõudnud muid linke juba korduvalt kontrollida ja leidnud, et need ei tööta, siis hakkab ta eeldatavasti nende juurde ka uusi arhiivilinke lisama. Robot märgib praegu muuseas varasemad arhiivilingiga mittetöötavad lingid enamasti töötavaks, eeldatavasti siis samuti, kuna ta pole jõudnud neid veel korduvalt kontrollida. Pikne 15. juuni 2022, kell 20:29 (EEST)

Kuupäevavorming

Jätsin häälestusse praegu alles kaks kuupäevavormingut, mida robot viitemallides kasutab: 12.03.2015 ja 2015-03-12. Esialgu kasutas robot ka vormingut "12. märts 2015", aga seda ta paraku ei oska parameetri "vaadatud" juures õigesse käändesse panna. 2015-03-12 on vaikevorming ja väljal "arhiivimisaeg" vahetab robot selle vastu välja muud vormingud, mida ta ei tunne, ka sama vormingu "12. märts 2015". Loodetavasti sellest pole lugu nüüd, kui viitemall vormistab selle vaikevormingu ümber sobivale kujule. Pikne 15. juuni 2022, kell 20:29 (EEST)

Eri:Erin/6121615

Kaniivel, see tuleb sellest, et ma ei lisanud väikese tähega parameetrit "kasutatud" roboti häälestuses parameetrite vastendusse. See puudus malli dokumentatsioonist ja enne mooduli kasutuselevõttu ka mallist endast. Ma leidsin seda parameetrit praegu veel viiest artiklist ja parandasin neis. Pikne 15. juuni 2022, kell 20:29 (EEST)

Võimalik, et see oli n-ö hulkuv parameeter, mis endale ise tee malli koodi ja dokumentatsiooni rajas. Küsisin Cyberpower678 käest endale ligipääsu boti häälestuse lehele, et asja oma silmaga üle vaadata, seni pole talt vastust tulnud. Samas, kui juba said korda, siis pole ka otsest vajadust. Hea, et InternetArchiveBot nüüd siin vikis töötab. Kaniivel (arutelu) 15. juuni 2022, kell 22:34 (EEST)

Parameetrite vastendus

Pikne, vaatasin üle roboti Netiviite malli parameetrite vastendused selle pilguga, et kas midagi on vaja lisada. Ma teeks järgmised muudatused.

Olemasolev kood:

pealkiri|Pealkiri|title={title}|url|URL={url}|vaadatud|kasutatud|online|Kasutatud={accesstimestamp:automatic}|arhiivimisaeg|Arhiivimisaeg|access-date={archivetimestamp:automatic}|arhiivimisurl|Arhiivimisurl|archive-url={archiveurl}|url-olek|url-status={deadvalues:ei tööta;;dead;;deviated:töötab;;live:robot\: teadmata;;ei sobi;;bot\: unknown;;unfit;;usurped:yes}|keel|Keel={language}

Uus kood:

pealkiri|Pealkiri={title}|url|URL={url}|vaadatud|kasutatud|online|Kasutatud={accesstimestamp:automatic}|arhiivimisaeg|Arhiivimisaeg={archivetimestamp:automatic}|arhiivimisurl|Arhiivimisurl={archiveurl}|url-olek={deadvalues:ei tööta;;dead;;deviated:töötab;;live:robot\: teadmata;;ei sobi;;anastatud;;bot\: unknown;;unfit;;usurped:yes}|keel|Keel={language}|pealkiri-link={titlelink}|doi|DOI={doi}|isbn|ISBN={isbn}|leheküljed|lehekülg={page}|url-ligipääs={paywall:tellimus;;subscription:registreerimine;;registration:piiratud;;limited:free}

Lisasin muutujad, mida varem polnud (titlelink, doi, isbn, page, paywall). Lisasin 'anastatud' väärtuse. Võtsin ära ingliskeelse aliase kõikjalt. Kas see on vajalik? Netiviite malli kasutustes tavaliselt ingliskeelseid parameetreid ei leidu. (Seega tegelikult pole ka väärtuste osas ingliskeelseid paralleelvasteid vaja.) Olemasolev vastendus pole ka ühtlane, nt parameetril 'vaadatud' pole ingliskeelset aliast lisatud. 'access-date' on miskipärast parameetri 'arhiivimisaeg' vasteks, see peab küll viga olema. Kaniivel (arutelu) 21. jaanuar 2023, kell 14:27 (EET)

Parandasin. Jätsin siis praegu ka väärtustesse ainult eestikeelsed vasted. Kohanda vastavalt vajadusele.

Ma paari nädala eest lisasin sinna ka uued mallid, mille tegid, aga parameetrit "url-ligipääs" ja veel mõnd lisaparameetrit esialgu eirasin, kuna ma pole tähele pannud, et robot nendega tegelikult midagi teeks. Jah, "access-date" oli küll valesti, aitäh märkamast!

Vaikimisi proovib robot vastendused siinsest moodulist välja lugeda, aga eestikeelsete mallide puhul see nähtavasti ei saa hästi toimida, kuna parameetrite põhinimed on ingliskeelsed. Kui robot nüüd viimati septembris jukerdas ja käsitsi sisestatud vastendused kuidagi kaotsi läksid, siis nende asemel läks käiku see vaikevastendus. Pärast ma jätsin sellesse need mõned ingliskeelsed aliased alles, juhuks kui keegi peaks eestikeelsesse malli ingliskeelseid parameetreid sisestama. Samas, isegi kui sisestab ja robot seetõttu teises keeles parameetrid topelt lisab, siis ehk ongi parem, kui vales keeles parameetrid sedasi välja tulevad. Pikne 22. jaanuar 2023, kell 12:36 (EET)

Vaatasin, et pole dokumenteeritud, kuid cite-mallide konfis on url-i parameetri aliasteks pandud kõik parameetrid, mis urli võivad sisaldada. Näiteks article-url, chapter-url jm. Title'i aliasteks kõik, kus mingil kujul pealkiri sees on, nt article-title, script-title jne. Lisasin eestikeelsetes mallides selle eeskujul samuti kõik ära tõlgitud parameetrid. Kaniivel (arutelu) 31. jaanuar 2023, kell 16:36 (EET)

Materjal uuel aadressil veebis endiselt olemas

Mu meelest on see robot pisut loll ja tema tegutsemist tuleks vähemalt osadel juhtudel takistada. "Pooltehis" aru võiks ju suuta eristada erinevat tüüpi olukordi: 1) viidatud andmebaasi veebiaadress on muutunud, ent andmebaas on uuel aadressil veebis endiselt olemas; ja 2) viidatud üksiklehekülg on veebis lõplikult suletud. Esimesse tüüpi kuuluvad Eesti Vikipeedias näiteks juhud, kus viimastel aastatel on muutunud Eesti biograafiline andmebaasi ISIK, ESBL sporditulemuste andmebaasi või teenetemärkide kavaleride andmebaasi veebilehe aadressid. InternetArchiveBot asendab need tuimalt web.arcive.org arhiivikoopiatega. See ei ole hea lahendus, sest mitmed andmebaasid on "elavad", selles mõttes, et isiku kohta andmebaasis olev info võib aja jooksul täieneda või tehakse seal mingeid parandusi. Tehisaru võiks ju olla arukam, otsida veebist andmebaasi uue aadressi ja teha viitelinkides aadressiparandused. Inimesele oleks selliste paranduste sisseviimine ju arutu ja nüri aja- ja töökulu ning ei saa oodata, et artiklite kirjutajad jäävad aastateks selliseid muudatusi tegema ja kontrollima, et ega keegi ei ole kusagil mõnd andmebaasi teisele aadressile ümber tõstnud. InternetArchiveBot võiks aga viidetes kasutatud lingid asendada arhiivikoopiatega üksnes neil juhtudel, kus leht on permanentselt maas ja seda ei leidu ka enam kusagil mujal veebiavarustes.--VillaK (arutelu) 22. märts 2023, kell 18:39 (EET)

Allikaviite puhul iseenesest on kasutatud materjali mingi seisuga. Kui n-ö elus andmebaasi täiendatakse või seal korrigeeritakse andmeid, siis ei pruugi sealne materjal enam viitele eelneva väitega klappida. Algsele vaatamisajale ligidasel ajal arhiivitud lehel oli suurema tõenäosusega sama materjal, mida allikana kasutatati, ning seetõttu tuleks minu meelest eelistada ikka arhiivilingi lisamist.

Mõnikord küll on robot lisanud lingi, mis viitab katkisele arhiivilehele (veebileht oli arhiivimise hetkel juba pooleldi kadunud või link viis algusest peale valesse kohta). Siis küll tuleks arhiivilink asendada või eemaldada, aga üldjuhul ei tohiks olla selleks vajadust. Kui viites vana link uuega asendada, siis tuleks uuendada ka vaatamise kuupäeva ja oleks hea ka viidatud väide uuesti üle kontrollida.

Mul on mõne välislingi parandamisega veel selline halb kogemus: pärast parandamist lakkab õige pea töötamast ka uus link ning uuema, aga lühemat aega kehtinud veebiaadressi järgi on pärast veebilehte ka arhiivist raskem üles leida. Pikne 27. märts 2023, kell 19:29 (EEST)

Viidete tühjendamine

Märkasin, et robot on artiklis mitu viidet tühjendanud. See oli küll juba üle aasta tagasi, vast on viga nüüdseks parandatud. Eri:Erin/6214484. Kaniivel (arutelu) 4. veebruar 2024, kell 01:08 (EET)

Seal oli siiski artiklis viidetega eelnevalt valesti: topelt sama sisuga viited viidete loendi mallis. Mis veateadet ei tekita. Robot asendas topeltviited korduvviitega ja siis tekkis veateade. Kaniivel (arutelu) 4. veebruar 2024, kell 22:09 (EET)

Seadistused

Muutsin eile roboti seadistusi:

• Modify existing archives: no -> yes
• Normalize archive URL encoding: no -> yes

Kaniivel (arutelu) 11. veebruar 2024, kell 11:55 (EET)

Muutsin "Normalize archive URL encoding" tagasi yes -> no, sest kuigi see muudatus pole vale, muudab see lingi loetamatuks. Kaniivel (arutelu) 12. veebruar 2024, kell 22:02 (EET)

Topeltparameetrid

Vähesel määral on viitemallides topelt parameetreid (arhiivimisurl, arhiivimisaeg), mis robot on lisanud. Eeldan, et ajutise vea tõttu. Kategoorias Kategooria:CS1 vead: topeltparameeter on nad kõik leitavad ja parandatavad. Kaniivel (arutelu) 11. veebruar 2024, kell 12:04 (EET)

Vaatasin nüüd täpsemalt, et topelt parameetrid on robot lisanud juba eelnevalt vigastesse mallidesse. Kus eestikeelses mallis on kasutatud ingliskeelset parameetrit: Eri:Erin/6528458. Kaniivel (arutelu) 11. veebruar 2024, kell 12:14 (EET)

Viitesisesed jutumärgid

Kui ma ei eksi, siis mingil ajal on nt enwiki hakanud lähenema asjale selliselt, et kui viidatud art pealkiri on nt «Где то там» / “World”, siis kuvatakse see (st, jutumärgid) vaatajale/lugejale „topeltsirgjutumärkidena“ ("") ☆☆☆ — Pietadè 11. veebruar 2024, kell 14:52 (EET)