archive.org læser kun robots.txt ??

Fra Århus

Tilmeldt 3. Jan 07

Indlæg ialt: 5

Mads Bendt Skrevet 03-01-2007 kl. 18:40

Hvor mange stjerner giver du? :

Hej

Jeg har oprettet mig korrekt på http://www.alexa.com, men har det problem at ia_archiver-web.archive.org kun læser min robots.txt (se nedenunder)
>>
# /robots.txt file for http://www.bendt.as/
# mail info@bendt.as for constructive criticism

User-agent: *
Disallow: /internet.nsf/
<<

Hvad kan det skyldes, hvordan får jeg den til at arkivere mit site?

Mvh.

Mads Bendt
-direktør for
innovationsvirksomheden bendt ApS

Tilmeldt 27. Aug 06

Indlæg ialt: 94

TheCelt Skrevet 03-01-2007 kl. 20:02

Hvor mange stjerner giver du? :

Hejsa,

Hvis jeg forstår dig korrekt, så har du lige oprettet dig på alexa, ikke?

Så går der, ud fra hvad jeg ved, et par måneder. 1-3 mdr. Sådan var det for os, og jeg fik af vide da vi tilmeldte os, at man skulle regne med at der ville gå lidt tid.

Så hvis jeg husker korrekt, og det er dét du mener, så hav tålmodighed. De skal nok komme

Fra Århus

Tilmeldt 3. Jan 07

Indlæg ialt: 5

Mads Bendt Skrevet 03-01-2007 kl. 20:11

Hvor mange stjerner giver du? :

Hej

Jeg har faktisk været på Alexia i 6 mdr. nu (sitet er fra 1-4-2006).

Der er ingen problemer med at blive vist på Alexia. Det der undrer mig er at at archive.org agenten "kun" snuser til robots.txt i stedet for også at kigge på mine websider (jeg kører på en dominoplatform og overvåger søgemaskinerne)

Mads Bendt
Innovationsvirksomheden bendt ApS