Mar a chuireas tu a-steach faidhle Robots.txt ùraichte no ùr

innealan-fuadain txt

Bidh a ’bhuidheann againn a’ làimhseachadh co-chomhairleachadh sgrùdadh organach airson grunn luchd-reic SaaS sa ghnìomhachas. Bha neach-dèiligidh ris an do thòisich sinn ag obair o chionn ghoirid air cleachdadh gu math àbhaisteach a dhèanamh, a ’cur an tagradh aca air subdomain agus a’ gluasad làrach an leabhrain aca gu prìomh raon. Tha seo na chleachdadh àbhaisteach leis gu bheil e a ’toirt comas do gach sgioba riochdachaidh agus do sgioba margaidheachd ùrachaidhean a dhèanamh mar a dh’ fheumar gun a bhith an urra ris an fhear eile.

Mar chiad cheum ann a bhith a ’dèanamh anailis air an slàinte rannsachaidh organach aca, chlàraich sinn an dà chuid an leabhran agus na raointean tagraidh ann an Maighstirean-lìn. Sin nuair a dh ’ainmich sinn cùis sa bhad. Bha na duilleagan tagraidh uile air am bacadh bho bhith air an clàradh leis na h-einnseanan sgrùdaidh. Rinn sinn seòladh chun inntrigeadh robots.txt aca ann an Maighstirean-lìn agus dh ’ainmich sinn a’ chùis sa bhad.

Fhad ‘s a bha iad ag ullachadh airson an imrich, cha robh an sgioba leasachaidh aca ag iarraidh gum biodh fo-àrainn an tagraidh air a chlàr-amais le sgrùdadh, agus mar sin cha do leig iad às ruigsinneachd air einnseanan luirg. Tha am faidhle robots.txt na fhaidhle a lorgar ann am freumh na làraich agad - yourdomain.com/robots.txt - tha sin ag innse don einnsean sgrùdaidh am bu chòir dhaibh an làrach a chraoladh no nach bu chòir. Faodaidh tu riaghailtean a sgrìobhadh gus clàr-amais a cheadachadh no a dhì-cheadachadh air an làrach gu lèir no slighean sònraichte. Faodaidh tu cuideachd loidhne a chuir ris gus am faidhle mapa làraich agad a shònrachadh.

Tha robots.txt bha an inntrig a leanas aig faidhle a chuir casg air an làrach a bhith air a lughdachadh agus air a chlàr-amais ann an rangachadh toradh rannsachaidh:

Cleachdaiche-àidseant: * Cuir às dha: /

Bu chòir a bhith air a sgrìobhadh mar a leanas:

Cleachdaiche-àidseant: * Ceadaich: /

Tha an tè mu dheireadh a ’toirt cead do dh’ einnsean sgrùdaidh sam bith a tha a ’snàgail an làrach gum faigh iad cothrom air eòlaire no faidhle sam bith taobh a-staigh na làraich.

Sgoinneil ... mar sin a-nis gu bheil an robots.txt tha am faidhle foirfe ach ciamar a tha fios aig Google agus cuin a bheir iad sùil air an làrach a-rithist? Uill, faodaidh tu iarraidh gu tur gun toir Google sùil air na robots.txt agad, ach chan eil e ro ghoireasach.

Seòl chun a 'phuist Console Search Console Search Google Gus an Crawl> robots.txt Tester. Chì thu susbaint an fhaidhle robots.txt crawled as ùire taobh a-staigh an Tester. Ma tha thu airson am faidhle robots.txt agad ath-chuir a-steach, cliog Cuir a-steach agus thig popup le beagan roghainnean.

ath-chuir a-steach robots.txt

Is e an roghainn mu dheireadh Iarr air Google ùrachadh. Cliog air a ’phutan gorm Cuir a-steach ri taobh an roghainn sin agus an uairsin gluais air ais chun Crawl> robots.txt Tester roghainn clàr gus an duilleag ath-luchdachadh. Bu chòir dhut a-nis am faidhle robots.txt ùraichte fhaicinn còmhla ri stampa ceann-latha a sheallas gun deach a chìreadh a-rithist.

Mura faic thu dreach ùraichte, faodaidh tu briogadh air cuir a-steach agus tagh Thoir sùil air dreach a chaidh a luchdachadh suas gus seòladh chun fhaidhle robots.txt agad. Casgaidh mòran shiostaman am faidhle seo. Gu dearbh, bidh IIS a ’gineadh an fhaidhle seo gu dinamach stèidhichte air riaghailtean a chaidh a-steach tron ​​eadar-aghaidh cleachdaiche aca. Tha e glè choltach gum feum thu na riaghailtean ùrachadh agus an tasgadan ùrachadh gus faidhle robots.txt ùr fhoillseachadh.

innealan-fuadain-txt-tester

Dè do bheachd?

Tha an làrach seo a 'cleachdadh Akismet gus spama a lùghdachadh. Ionnsaich mar a thathar a 'pròiseasadh an dàta bheachdan agad.