|
|
Boa

: 11.11.2003 : 1025 : Bremen
|
| : 03.02.2004, 00:45 : Inktomi, Fast bezahlt |
|
|
| Ne Spiders.txt im includes verzeichnis. |
|
| Nach oben |
|
 |
golop

: 28.01.2004 : 65
|
| : 03.02.2004, 00:49 : Inktomi, Fast bezahlt |
|
|
dort habe ich nur eine spider_configure.php, wo die Spider drin sind die zulässig sind und welche nicht...
Hast Du dort eine andere Lösung oder Erweiterung. Liest DU die Daten von ein TXT-Datei an. Wenn ja ist da ja komfortabler....
Sag mal, wie Du das machst
Gruß und nun wirklich bis morgen
golop |
|
| Nach oben |
|
 |
Boa

: 11.11.2003 : 1025 : Bremen
|
| : 03.02.2004, 00:56 : Inktomi, Fast bezahlt |
|
|
| Code: |
$Id: spiders.txt,v 1.2 2003/05/05 17:58:17 dgw_ Exp $
almaden.ibm.com
appie 1.1
architext
ask jeeves
asterias2.0
augurfind
baiduspider
bannana_bot
bdcindexer
crawler
crawler@fast
docomo
fast-webcrawler
fluffy the spider
frooglebot
geobot
googlebot
gulliver
henrythemiragorobot
ia_archiver
infoseek
kit_fireball
lachesis
lycos_spider
mantraagent
mercator
moget/1.0
muscatferret
nationaldirectory-webspider
naverrobot
ncsa beta
netresearchserver
ng/1.0
osis-project
polybot
pompos
scooter
seventwentyfour
sidewinder
sleek spider
slurp/si
slurp@inktomi.com
steeler/1.3
szukacz
t-h-u-n-d-e-r-s-t-o-n-e
teoma
turnitinbot
ultraseek
vagabondo
voilabot
w3c_validator
zao/0
zyborg/1.0 |
Wenn jemand noch Erweiterungen kennt wäre auch nicht schlimm |
|
| Nach oben |
|
 |
golop

: 28.01.2004 : 65
|
| : 03.02.2004, 13:56 : Inktomi, Fast bezahlt |
|
|
Hi,
mein Spider werden ja direkt in der php-Datei definiert. Wie ist denn das bei Dir coding-mäßig geregelt (Einlesen der TEXT usw.)...
Wäre cool, wenn Du mir das mal darstellen könntest...
Viele Grüße
golop |
|
| Nach oben |
|
 |