urlclean

urlclean gir følgende funksjoner:
- Å følge en http redirect,
- Å følge en HTML META omdirigere,
- Å fjerne Urchin og Facebook tracker webadresseparametere
- Som kombinerer alle disse til unshorten og løse ulike nettadresser
Prøv det ut fra kommandolinja:
& Nbsp; python -m urlclean
Innhold:
Indekser og tabeller
- Index
- Modul Index
- Søkeside
Dokumentasjon for Kode
urlcleaner en modul som løser webadresser og fjerner sporingswebadressen params
urlclean.weedparams (url)
& Nbsp; fjerner Urchin Tracker og Facebook overvåking params fra nettadresser.
& Nbsp; args:
& Nbsp; url (str): Den url å skrubbe av stygge params
& nbsp; retur:
& Nbsp; (str). Avkastningen renset url
urlclean.httpresolve (url, ua = Ingen, proxyhost = 'localhost', proxyport = 8118)
& Nbsp; løse en omdirigering av en http forespørsel.
& Nbsp; args:
& Nbsp; url (str): Den url å følge en redirect
& Nbsp; ua (fn): En funksjon returnerer en User Agent-strengen (valgfritt)
& Nbsp; proxyhost (str): http proxy server (valgfritt)
& Nbsp; proxyport (int): http proxy server port (valgfritt)
& Nbsp; Returns: (str, httplib.response). Avkastningen løst url, og
& Nbsp; svaret fra http spørring
urlclean.unmeta (url, res)
& Nbsp; Finner noen meta omdirigeringer en httplib.response objekt som har text / html som innholdstype.
& Nbsp; args:
& Nbsp; url (str): Den url å følge en redirect
& nbsp; res (httplib.response): en http.response objekt
& Nbsp; Returns: (str). Avkastningen løst url
urlclean.unshorten (url, cache = Ingen, ua = Ingen,>> ** <> **