Исходный код Grab

Автор Сообщение
#80
11 Июл, 2013 23:25
Наконец собрался разобраться в исходном коде Grab::Spider. Подскажите где именно в коде идет формирование grab который передаеться в task_xxx после получения ответа. Меня интересует модификация таким образом чтоб про grab.config['proxy'] в таске можно было увидеть этот самый прокси через который получено ответ?
#83
20 Авг, 2013 19:11
Смотреть в следующем порядке:

* https://github.com/lorien/grab/blob/master/grab/spider/task.py#L103
* https://github.com/lorien/grab/blob/master/grab/spider/base.py#L343
* https://github.com/lorien/grab/blob/master/grab/spider/base.py#L728
* https://github.com/lorien/grab/blob/master/grab/spider/base.py#L751
* https://github.com/lorien/grab/blob/master/grab/spider/transport/multicurl.py#L25

> Меня интересует модификация таким образом чтоб про grab.config['proxy'] в таске можно было увидеть этот самый прокси через который получено ответ?

Разве сейчас в grab.config['proxy'] содержится какая-то другая информация?

Новый ответ

Ответить