Löytävätkö hakurobotit sellaisia sivuja, joihin ei ole viitettä missään muualla?
Eli voiko laittaa suppean piirin tietoa veppisivulle ja tiedottaa osoitteen vain tälle joukolle eikä laita minnekään linkkiä sinne.
Siis esim. index.html-sivullakaan sitä ei mainita.
Eli vain asiasta tietävät osaisivat mennä sinne...
Eli voiko laittaa suppean piirin tietoa veppisivulle ja tiedottaa osoitteen vain tälle joukolle eikä laita minnekään linkkiä sinne.
Siis esim. index.html-sivullakaan sitä ei mainita.
Eli vain asiasta tietävät osaisivat mennä sinne...
Vastaukset 2
Vanhimmat
Kyllä löytävät, ehkä vähän hitaammassa tahdissa, mutta aina löytävät, kun sivusi ovat julkisessa internetissä.
Laita html-juurihakemistoon oikeanlainen robots.txt-tiedosto, niin lainkuuliaiset hakukoneet jättävät tietosi indeksoimatta. Spammereiden käyttämiin mailiosoitteita kerääviin spidereihin tämä ei tepsi, mutta Googleen nyt kuitenkin.
Ohjeita robots.txt:n rakentamiseksi löytyy hakukoneilla.