urlclean

urlclean fornece as seguintes funções:
- Seguir um redirecionamento http,
- Seguir uma META HTML redirecionar
- Para remover Urchin e Facebook parâmetros de URL rastreador
- Que combina todos estes para Unshorten e resolver várias URLS
Experimente-o a partir da linha de comando:
& Nbsp; python -m urlclean
Conteúdo:
Índices e tabelas
- Index
- Índice Módulo
- Página de Pesquisa
Documentação para o Código
urlcleaner um módulo que resolve urls redirecionadas e remove rastreamento params url
urlclean.weedparams (url)
& Nbsp; remove Urchin do Tracker e Facebook parâmetros de vigilância de urls.
& Nbsp; Args:
& Nbsp; url (STR): A url para esfregar de params feias
& nbsp; Returns:
& Nbsp; (str). O retorno limpo url
urlclean.httpresolve (url, ua = None, proxyHost = 'localhost', proxyPort = 8118)
& Nbsp; resolver um redirecionamento de uma solicitação HTTP.
& Nbsp; Args:
& Nbsp; url (STR): A url a seguir um redirecionamento
& Nbsp; ua (fn): Uma função que retorna uma seqüência de agente do usuário (opcional)
& Nbsp; proxyHost (str): http servidor proxy (opcional)
& Nbsp; proxyPort (int): http porta do servidor proxy (opcional)
& Nbsp; Returns: (str, httplib.response). O retorno resolvido url, e
& Nbsp; a resposta a partir da consulta http
urlclean.unmeta (url, res)
& Nbsp; Localiza qualquer meta redireciona um objeto httplib.response que tem text / html como do tipo de conteúdo.
& Nbsp; Args:
& Nbsp; url (STR): A url a seguir um redirecionamento
& nbsp; res (httplib.response): um objeto http.response
& Nbsp; Returns: (str). O retorno resolvido url
urlclean.unshorten (url, cache = None, ua = None,>> ** <> **