Python - Demande de fermeture de la connexion http

Question

Je me demandais, comment fermer une connexion avec Requests (python-requests.org) ?

Con httplib c'est HTTPConnection.close() mais comment faire de même avec les demandes ?

Code :

r = requests.post("https://stream.twitter.com/1/statuses/filter.json", data={'track':toTrack}, auth=('username', 'passwd'))
for line in r.iter_lines():
    if line:
        self.mongo['db'].tweets.insert(json.loads(line))

Answer 1

Je pense qu'une manière plus fiable de fermer une connexion est de dire explicitement au serveur de la fermer d'une manière conforme à la spécification HTTP :

HTTP/1.1 définit l'option de connexion "close" pour que l'expéditeur indique que la connexion sera fermée une fois le message terminé. de signaler que la connexion sera fermée à la fin de la réponse. réponse. Par exemple,

   Connection: close

dans les champs d'en-tête de la demande ou de la réponse indique que la connexion NE DEVRAIT PAS être considérée comme `persistante' (section 8.1) une fois que la demande/réponse en cours est terminée.

El Connection: close est ajouté à la demande réelle :

r = requests.post(url=url, data=body, headers={'Connection':'close'})

Answer 2

Je suis venu à cette question en cherchant à résoudre le "too many open files" error mais j'utilise requests.session() dans mon code. Quelques recherches plus tard, j'ai trouvé une réponse sur le site de l Documentation sur les requêtes Python qui suggère d'utiliser le with afin que la session soit fermée même si des exceptions ne sont pas gérées :

with requests.Session() as s:
    s.get('http://google.com')

Si vous n'utilisez pas Session, vous pouvez en fait faire la même chose : https://2.python-requests.org/en/master/user/advanced/#session-objects

with requests.get('http://httpbin.org/get', stream=True) as r:
    # Do something

Answer 3

Comme indiqué aquí En effet, il n'existe pas vraiment de connexion HTTP et ce que httplib appelle la connexion HTTPConnection est en fait la connexion TCP sous-jacente qui ne sait pas grand-chose de vos requêtes. Requests fait abstraction de cela et vous ne le verrez jamais.

La dernière version de Requests maintient en fait la connexion TCP en vie après votre demande. Si vous souhaitez que vos connexions TCP soient fermées, vous pouvez simplement configurer les requêtes pour qu'elles n'utilisent pas la fonction keep-alive .

s = requests.session()
s.config['keep_alive'] = False

Answer 4

Veuillez utiliser response.close() à fermer pour éviter l'erreur "trop de fichiers ouverts".

par exemple :

r = requests.post("https://stream.twitter.com/1/statuses/filter.json", data={'track':toTrack}, auth=('username', 'passwd'))
....
r.close()

Answer 5

Sur Requests 1.X, la connexion est disponible sur l'objet de réponse :

r = requests.post("https://stream.twitter.com/1/statuses/filter.json",
                  data={'track': toTrack}, auth=('username', 'passwd'))

r.connection.close()