Analyser les URI personnalisés avec urlparse (Python)

Mon application crée personnalisée Uri (ou Url?) pour identifier les objets et de les résoudre. Le problème est que Python urlparse module refuse à analyser inconnu schémas d'URL comme il l'analyse http.

Si je ne réglez pas urlparse de uses_* listes-je obtenir ceci:

>>> urlparse.urlparse("qqqq://base/id#hint")
('qqqq', '', '//base/id#hint', '', '', '')
>>> urlparse.urlparse("http://base/id#hint")
('http', 'base', '/id', '', '', 'hint')

Voici ce que je fais, et je me demande si il y a une meilleure façon de le faire:

import urlparse

SCHEME = "qqqq"

# One would hope that there was a better way to do this
urlparse.uses_netloc.append(SCHEME)
urlparse.uses_fragment.append(SCHEME)

Pourquoi il n'y a pas de meilleure façon de le faire?

source d'informationauteur u0b34a0f6ae

  1. 3

    Je pense que le problème est d'URI n'ont pas tous un format commun après le régime. Par exemple, mailto: les url ne sont pas structurés de la même chose que http: url.

    Je voudrais utiliser les résultats de la première analyse, puis de synthétiser une url http et de l'analyser à nouveau:

    parts = urlparse.urlparse("qqqq://base/id#hint")
fake_url = "http:" + parts[2]
parts2 = urlparse.urlparse(fake_url)
  2. 23

    Vous pouvez également enregistrer un gestionnaire personnalisé avec urlparse:

    import urlparse

def register_scheme(scheme):
    for method in filter(lambda s: s.startswith('uses_'), dir(urlparse)):
        getattr(urlparse, method).append(scheme)

register_scheme('moose')

    Cela va ajouter à votre schéma d'url pour les listes:

    uses_fragment
uses_netloc
uses_params
uses_query
uses_relative

    L'uri doit ensuite être traité comme http et renvoie correctement le chemin d'accès, le fragment, le nom d'utilisateur/mot de passe etc.

    urlparse.urlparse('moose://username:password@hostname:port/path?query=value#fragment')._asdict()
=> {'fragment': 'fragment', 'netloc': 'username:password@hostname:port', 'params': '', 'query': 'query=value', 'path': '/path', 'scheme': 'moose'}
  3. 3

    Il est aussi appelé bibliothèque furl qui vous donne le résultat que vous souhaitez:

    >>>import furl
>>>f=furl.furl("qqqq://base/id#hint");
>>>f.scheme
'qqqq' 

>>> f.host
'base'  
>>> f.path
Path('/id')
>>>  f.path.segments
['id']
>>> f.fragment                                                                                                                                                                                                                                                                 
Fragment('hint')   
>>> f.fragmentstr                                                                                                                                                                                                                                                              
'hint'
  4. 2

    La question semble être hors de date. Depuis, au moins, Python 2.7 il n'y a pas de problèmes.

    Python 2.7.10 (default, May 23 2015, 09:40:32) [MSC v.1500 32 bit (Intel)] on win32
>>> import urlparse
>>> urlparse.urlparse("qqqq://base/id#hint")
ParseResult(scheme='qqqq', netloc='base', path='/id', params='', query='', fragment='hint')
  5. 1

    Essayez de supprimer le régime entièrement, et de commencer avec la //netloc, c'est à dire:

    >>> SCHEME="qqqq"
>>> url="qqqq://base/id#hint"[len(SCHEME)+1:]
>>> url
'//base/id#hint'
>>> urlparse.urlparse(url)
('', 'base', '/id', '', '', 'hint')

    Vous n'aurez pas le schéma du urlparse résultat, mais vous savez que le régime de toute façon.

    Notez également que la version 2.6 de Python semble gérer cette url très bien (à part le fragment):

    $ python2.6 -c 'import urlparse; print urlparse.urlparse("qqqq://base/id#hint")'
ParseResult(scheme='qqqq', netloc='base', path='/id#hint', params='', query='', fragment='')
  6. 0

    Vous pouvez utiliser yurl de la bibliothèque. Contrairement à purl ou rouler, il ne pas essayer de les corriger urlparse bugs. Il est de nouveau compatible avec la RFC 3986 de mise en œuvre.

    >>> import yurl
>>> yurl.URL('qqqq://base/id#hint')
URLBase(scheme='qqqq', userinfo=u'', host='base', port='', path='/id', query='', fragment='hint')