Parsero: Unterschied zwischen den Versionen

Aus Xinux Wiki
Zur Navigation springen Zur Suche springen
 
(6 dazwischenliegende Versionen von 2 Benutzern werden nicht angezeigt)
Zeile 1: Zeile 1:
=Parsero Definition=
+
*[[Parsero Definition]]
*Mithilfe von Parsero wird die Robots.txt eines Web-Servers ausgelesen und die Disallow-Einträge angezeigt.
+
*[[Parsero anwenden]]
*Disallow-Einträge sind die Links die nicht von Suchmaschinen wie z.B. Bing. Google, etc. indexiert werden dürfen.
 
[[Datei:Bildschirmfoto von 2021-08-12 15-38-00.png]]
 
 
 
=Funktion=
 
*Mit dem Befehl '''parsero -u ''''LINK''''''' wird die Robots.txt gelesen
 
*Beispiel:
 
parsero -u facebook.de
 
=Befehle=
 
*parsero -h ''''Für Hilfe''''
 
*parsero -u URL
 
*parsero -u URL -o ''''gibt nur HTTP 200 status code an''''
 
*parsero -u URL -sb ''Nur Disallow Einträge für Bing suchen''
 

Aktuelle Version vom 12. August 2021, 14:14 Uhr