Parsero: Unterschied zwischen den Versionen
Zur Navigation springen
Zur Suche springen
| Zeile 12: | Zeile 12: | ||
*parsero -u URL | *parsero -u URL | ||
*parsero -u URL -o ''''gibt nur HTTP 200 status code an'''' | *parsero -u URL -o ''''gibt nur HTTP 200 status code an'''' | ||
| − | *parsero -u URL -sb | + | *parsero -u URL -sb ''Nur Disallow Einträge für Bing suchen'' |
Version vom 12. August 2021, 13:44 Uhr
Parsero Definition
- Mithilfe von Parsero wird die Robots.txt eines Web-Servers ausgelesen und die Disallow-Einträge angezeigt.
- Disallow-Einträge sind die Links die nicht von Suchmaschinen wie z.B. Bing. Google, etc. indexiert werden dürfen.
Funktion
- Mit dem Befehl parsero -u ''LINK'' wird die Robots.txt gelesen
- Beispiel:
parsero -u facebook.de
Befehle
- parsero -h 'Für Hilfe'
- parsero -u URL
- parsero -u URL -o 'gibt nur HTTP 200 status code an'
- parsero -u URL -sb Nur Disallow Einträge für Bing suchen