Meta-osan määritteet?

Olen kaivanut netistä jos jonkinlaisista paikoista meta-osaan liittyviä määritteitä. Niistä olisi muutama selventävä kysymys, kun en kaikkia ymmärrä. Liitän oheen dokumenttirakenteen:






xxx














      










Ja sitten kysymykset:

Jos meta-osassa annetaan ohjeita hakuroboteille (googlebot, robots), tarvitaanko tiedostoa robots.txt?

Mitä tarkoittavat: "distribution" content="global"; "document-class" content="published" ja "rating" content="general"?

Määrittelevätkö html lang="fi" xml:lang="fi" ja meta http-equiv="content-language" content="fi" dokumentin sisällön kahteen kertaan suomeksi? Onko toinen turha?

Onko oikein? Yhdistin itse parista eri lähteestä nuo all, index ja follow yhteen.

Onko noissa jotakin liikaa/aivan turhaa vai voiko niitä kaikkia käyttää? Onhan niitä melkoinen lista...