webentwicklung-frage-antwort-db.com.de

Unerklärliche nicht existierende Seite seit Monaten angefordert

Während ich mit Bots vertraut bin, die bekannte Seiten für WordPress und phpMyAdmin auf jeder Website anfordern, auf die ich zugreifen kann, habe ich es jetzt mit einem Bot zu tun, der eine Seite angefordert hat, die ich wirklich nicht erklären kann.

Seit Monaten wird eine Seite /featured/like?id=XXX (wobei XXX eine dreistellige Ganzzahl ist) über mehrere IP-Adressen aus Ländern wie Frankreich, Deutschland und mehr als 10 Mal am Tag angefordert Ukraine (Website wird gehostet und auf die Niederlande ausgerichtet).

Diese Seite existiert nicht und wird von keiner Suchmaschine indiziert.

Ich bin mir fast sicher, dass dies nur ein weiterer Bot ist, der versucht, eine Seite zu finden, die von einem Framework verwendet wird, aber das läuft schon seit Monaten, deshalb möchte ich nur sicherstellen, dass es funktioniert.

Weiß jemand, warum diese Seite immer wieder angefordert wird?

1
DavidKunz

Hm...

Der schnelle Weg, um zu verhindern, dass Roboter Ihre Site besuchen, besteht darin, diese beiden Zeilen in die /robots.txt -Datei auf Ihrem Server einzufügen:

User-agent: *
Disallow: /

Versuchen Sie, dies für einen Tag zu formulieren, und sehen Sie, was passiert. Dies hilft nur bei gut erzogenen Robotern.

Wenn Sie diese Seite jedoch ausdrücklich nicht zulassen möchten,

Disallow: /featured/

Mach das und schau was passiert.

2
Josip Ivic