Обработка Python socket.error: [Errno 104] Сброс соединения по пиру

43

При использовании Python 2.7 с urllib2 для извлечения данных из API я получаю сообщение об ошибке [Errno 104] Connection reset by peer. Что вызывает ошибку и как следует обрабатывать ошибку, чтобы script не сработал?

ticker.py

def urlopen(url):
    response = None
    request = urllib2.Request(url=url)
    try:
        response = urllib2.urlopen(request).read()
    except urllib2.HTTPError as err:
        print "HTTPError: {} ({})".format(url, err.code)
    except urllib2.URLError as err:
        print "URLError: {} ({})".format(url, err.reason)
    except httplib.BadStatusLine as err:
        print "BadStatusLine: {}".format(url)
    return response

def get_rate(from_currency="EUR", to_currency="USD"):
    url = "https://finance.yahoo.com/d/quotes.csv?f=sl1&s=%s%s=X" % (
        from_currency, to_currency)
    data = urlopen(url)
    if "%s%s" % (from_currency, to_currency) in data:
        return float(data.strip().split(",")[1])
    return None


counter = 0
while True:

    counter = counter + 1
    if counter==0 or counter%10:
        rateEurUsd = float(get_rate('EUR', 'USD'))

    # does more stuff here

Traceback

Traceback (most recent call last):
  File "/var/www/testApp/python/ticker.py", line 71, in <module>
    rateEurUsd = float(get_rate('EUR', 'USD'))
  File "/var/www/testApp/python/ticker.py", line 29, in get_exchange_rate
    data = urlopen(url)
  File "/var/www/testApp/python/ticker.py", line 16, in urlopen
    response = urllib2.urlopen(request).read()
  File "/usr/lib/python2.7/urllib2.py", line 126, in urlopen
    return _opener.open(url, data, timeout)
  File "/usr/lib/python2.7/urllib2.py", line 406, in open
    response = meth(req, response)
  File "/usr/lib/python2.7/urllib2.py", line 519, in http_response
    'http', request, response, code, msg, hdrs)
  File "/usr/lib/python2.7/urllib2.py", line 438, in error
    result = self._call_chain(*args)
  File "/usr/lib/python2.7/urllib2.py", line 378, in _call_chain
    result = func(*args)
  File "/usr/lib/python2.7/urllib2.py", line 625, in http_error_302
    return self.parent.open(new, timeout=req.timeout)
  File "/usr/lib/python2.7/urllib2.py", line 406, in open
    response = meth(req, response)
  File "/usr/lib/python2.7/urllib2.py", line 519, in http_response
    'http', request, response, code, msg, hdrs)
  File "/usr/lib/python2.7/urllib2.py", line 438, in error
    result = self._call_chain(*args)
  File "/usr/lib/python2.7/urllib2.py", line 378, in _call_chain
    result = func(*args)
  File "/usr/lib/python2.7/urllib2.py", line 625, in http_error_302
    return self.parent.open(new, timeout=req.timeout)
  File "/usr/lib/python2.7/urllib2.py", line 400, in open
    response = self._open(req, data)
  File "/usr/lib/python2.7/urllib2.py", line 418, in _open
    '_open', req)
  File "/usr/lib/python2.7/urllib2.py", line 378, in _call_chain
    result = func(*args)
  File "/usr/lib/python2.7/urllib2.py", line 1207, in http_open
    return self.do_open(httplib.HTTPConnection, req)
  File "/usr/lib/python2.7/urllib2.py", line 1180, in do_open
    r = h.getresponse(buffering=True)
  File "/usr/lib/python2.7/httplib.py", line 1030, in getresponse
    response.begin()
  File "/usr/lib/python2.7/httplib.py", line 407, in begin
    version, status, reason = self._read_status()
  File "/usr/lib/python2.7/httplib.py", line 365, in _read_status
    line = self.fp.readline()
  File "/usr/lib/python2.7/socket.py", line 447, in readline
    data = self._sock.recv(self._rbufsize)
socket.error: [Errno 104] Connection reset by peer
error: Forever detected script exited with code: 1
  • 0
    На arch linux у меня нормально работает get_rate. Вы уверены, что вас не фильтруют? Можете ли вы загрузить этот URL в браузере?
  • 0
    @korylprince Он отлично работает в браузере, и сценарий работает некоторое время, прежде чем ошибка начинает появляться. Если я не могу избежать ошибки, как следует обрабатывать ошибку, чтобы она не вылетала и, возможно, использовать самое последнее полученное значение?
Теги:
python-2.7
urllib2

2 ответа

79

"Соединение reset by peer" - это эквивалент TCP/IP, который захлопывает телефон обратно на крючок. Он более вежливый, чем просто не отвечающий, оставляя одну висящую. Но это не FIN-ACK, ожидаемый от действительно вежливого TCP/IP-взаимодействия. (От другого ответа SO)

Итак, вы ничего не можете с этим поделать, это проблема сервера.

Но вы можете использовать блок try .. except для обработки этого исключения:

from socket import error as SocketError
import errno

try:
    response = urllib2.urlopen(request).read()
except SocketError as e:
    if e.errno != errno.ECONNRESET:
        raise # Not error we are looking for
    pass # Handle error here.
Поделиться
  • 0
    Правда ли, что администратор сервера обычно использует этот метод для блокировки потенциальных запросов на очистку от клиента или это скорее случайная ошибка? Теперь мне интересно, если я заблокирован намеренно или нет ...
0

Вы можете попытаться добавить несколько вызовов time.sleep к вашему коду.

Кажется, что серверная сторона ограничивает количество запросов на время (час, день, секунда) в качестве проблемы безопасности. Вам нужно угадать, сколько (возможно, используя другой script с помощью счетчика?) И настройте ваш script, чтобы не превзойти этот предел.

Чтобы избежать сбоя вашего кода, попробуйте поймать эту ошибку с помощью try .. except вокруг вызовов urllib2.

Поделиться

Ещё вопросы

Сообщество Overcoder
Наверх
Меню