Tlhaloso ea ho qhekella le baqhobi ba marang-rang

Li-Spiders & Crawlers tsa Websaete: Seo U Lokelang ho se Tseba ho Sireletsa Donnete tsa Ditshebeletso

Likokoana-hloko ke mananeo (kapa li-scripted scripts) tse 'hlahelang' ka Websaete ho batla lintlha. Likokoana-hloko li tsamaea ka li-URL tsa marang-rang 'me li ka hula data ho maqephe a maqephe joaloka liaterese tsa imeile. Li-spider li boetse li sebelisetsoa ho fepa tlhahisoleseling e fumanoang liwebsaeteng ho li-injini.

Likokoana-hloko, tseo hape ho thoeng ke 'bahlaseli ba marang-rang' ba batla Websaete 'me hase bohle ba nang le botsoalle ka morero oa bona.

Li-spammers Li-Internet tsa Li-Spider ho Bokella Boitsebiso

Google, Yahoo!

'me li-injini tse ling hase tsona feela tse thahaselloang ho khasa mawebsaete - kahoo ke scammers le spammers.

Likokoana-hloko le lisebelisoa tse ling tse sebelisoang ke li-spammers ho fumana liaterese tsa melaetsa (mocheng ona tloaelo ena e atisa ho bitsoa 'ho kotula') ho liwebsaete ebe o li sebelisa ho etsa lenane la spam.

Likokoana-hloko hape ke sesebelisoa se sebelisoang ke li-injini tsa ho batla ho fumana boitsebiso bo eketsehileng ka sebaka sa hau sa marang-rang empa se tlohe se sa hlahlojoe, websaete ea marang-rang ntle le litaelo (kapa, 'litumello') tsa ho khasa sebaka sa hau se ka hlahisa likotsi tse kholo tsa ts'ireletso ea tlhahisoleseding. Likokoana-hloko li tsamaea ka ho latela li-link, 'me li tseba ho fumana likahanya tsa marang-rang, lifaele tsa lenaneo le boitsebiso bo bong boo u sa batleng hore ba fihle.

Basebelisi ba liwebsaete ba ka sheba lifate ho bona hore na li-spider le liroboto tse ling li etetse libaka tsa tsona. Tlhahisoleseling ena e thusa bo-websaete hore ba tsebe hore na ke mang ea hlalosang sebaka sa bona, le hore na ke hangata hakae.

Tlhahisoleseling ena e molemo hobane e lumella webmasters hore ba hlahise SEO ea bona mme ba ntlafatse lifaele tsa robot.txt ho thibela liroboto tse ling hore li se ke tsa hlasela sebaka sa bona nakong e tlang.

Litlhahiso tsa ho Sireletsa Websaete ea Hao ho tswa ho Batho ba sa Batleng ba Robot

Ho na le tsela e bonolo haholo ea ho boloka batho ba sa batleheng ho khaotsa ho tsoa ho websaeteng ea hau. Esita le haeba u sa amehe ka likhahla tse kotsi tse tsomang sebaka sa hau sa marang-rang (e-s'o ka ea u sireletsa ho batho ba bangata), u lokela ho ntse u lokela ho fana ka li-search tse nang le litaelo tsa bohlokoa.

Liwebsaete tsohle li lokela ho ba le faele e ka har'a mohala oa motsoako o bitsoang robots.txt file. Fesete ena eu lumella hore u laele batho ba ts'oang marang-rang moo u batlang hore ba shebe maqephe a index (ntle le haeba ho boleloa ka tsela e 'ngoe litabeng tse itseng tsa maqephe a itseng hore e se ke ea ngolisoa) haeba e le mochine oa ho batla.

Feela joalokaha u ka bolella ba tsitsitseng ba batlang moo ba ka e shebellang, u ka boela ua ba bolella hore na ba ka 'na ba ea hokae' me ba thibela batho ba tsitsitseng marang-rang ho websaeteng eohle ea hau.

Ke habohlokoa ho hopola hore seliba se kopantsoeng le li-robot.txt file e tla ba le bohlokoa bo bongata ba lienjiniere tse ka ba tsa bohlokoa ho ntlafatsa ts'ebetso ea hau ea marang-rang, empa ba bang ba robot ba ntse ba hlokomoloha litaelo tsa hau. Ka lebaka lena, ke habohlokoa ho boloka mananeo a hau kaofela, li-plugins, le lisebelisoa tsa hau kamehla.

Lihlooho tse amanang le litaba

Ka lebaka la ho ata ha tlhahiso ea tlhahisoleseding e sebelisetsoang merero ea nefarious (spam), molao o ile oa fetisoa ka 2003 ho etsa mekhoa e itseng e seng molaong. Melao ena ea ts'ireletso ea bareki e oela tlas'a Molao oa CAN-SPAM oa 2003.

Ke habohlokoa hore u nke nako ea ho bala ka Molao oa CAN-SPAM haeba khoebo ea hau e kopanya mangolo afe kapa efe a ho bokella tlhahisoleseding.

U ka fumana ho eketsehileng ka melao e khahlanong le spam le kamoo u ka sebetsanang kateng le ba spammers, le seo mong'a khoebo a se keng a se etsa, ka ho bala lihlooho tse latelang: