Parsero: Unterschied zwischen den Versionen

Aus Xinux Wiki
Zur Navigation springen Zur Suche springen
 
Zeile 1: Zeile 1:
 
*[[Parsero Definition]]
 
*[[Parsero Definition]]
−
=Funktion=
+
*[[Parsero anwenden]]
−
Mit dem Befehl '''parsero -u ''''LINK''''''' wird die Robots.txt gelesen
 
−
 
 
−
Beispiel:
 
−
 
 
−
*parsero -u www.facebook.de
 
−
oder
 
−
*parsero -u www.dhs.gov
 
−
 
 
−
=Befehle=
 
−
*parsero -h - '''''Für Hilfe'''''
 
−
*parsero -u URL
 
−
*parsero -u URL -o - ''gibt nur HTTP 200 status code an'''''Fetter Text'''
 
−
*parsero -u URL -sb - '''''Nur Disallow Einträge für Bing suchen'''''
 

Aktuelle Version vom 12. August 2021, 14:14 Uhr