The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"wget & список прокси"
Вариант для распечатки  
Пред. тема | След. тема 
Форумы OpenNET: Виртуальная конференция (Public)
Изначальное сообщение [Проследить за развитием треда]

"wget & список прокси"  
Сообщение от Wing email(ok) on 26-Ноя-07, 13:38 
Приветствую, All.

Задача возникла: заставить wget скачать много обьектов через прокси, причем не через один, а через многие. Скажем, есть список проксей, и нужно, чтобы каждый следующий запрос шел уже через другой проксь. И так по кругу. Так что простой "for i in `cat plist.txt` wget --http_proxy ..." не катит ;( Да и какой-нибуть проксь может сдохнуть -> нужно повторить тот же запрос через другой...

Высказать мнение | Ответить | Правка | Cообщить модератору

 Оглавление

Сообщения по теме [Сортировка по времени | RSS]


1. "wget & список прокси"  
Сообщение от newser (ok) on 26-Ноя-07, 14:42 
>Приветствую, All.
>
>Задача возникла: заставить wget скачать много обьектов через прокси, причем не через один, а через многие. Скажем, есть список проксей, и нужно, чтобы каждый следующий запрос шел уже через другой проксь. И так по кругу. Так что простой "for i in `cat plist.txt` wget --http_proxy ..." не катит ;( Да и какой-нибуть проксь может сдохнуть -> нужно повторить тот же запрос через другой...

Так а что за вопрос-то? Сделать всё за Вас?

P.S. Немного подумать и написать скрипт на shell/perl не вариант?

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

2. "wget & список прокси"  
Сообщение от Wing email(ok) on 26-Ноя-07, 15:32 
>>Приветствую, All.
>>
>>Задача возникла: заставить wget скачать много обьектов через прокси, причем не через один, а через многие. Скажем, есть список проксей, и нужно, чтобы каждый следующий запрос шел уже через другой проксь. И так по кругу. Так что простой "for i in `cat plist.txt` wget --http_proxy ..." не катит ;( Да и какой-нибуть проксь может сдохнуть -> нужно повторить тот же запрос через другой...
>
>Так а что за вопрос-то? Сделать всё за Вас?
>
>P.S. Немного подумать и написать скрипт на shell/perl не вариант?

Я думал, возможно, кто-то либо знает доп. возможности вгета, либо сталкивался с подобной задачей и посоветует готовое решение. Скрипт-то я напишу, если никто ничего не подскажет, но по сути это получится полностью самописная качалка.

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

3. "wget & список прокси"  
Сообщение от Koba LTD email on 26-Ноя-07, 15:39 
>[оверквотинг удален]
>>>Задача возникла: заставить wget скачать много обьектов через прокси, причем не через один, а через многие. Скажем, есть список проксей, и нужно, чтобы каждый следующий запрос шел уже через другой проксь. И так по кругу. Так что простой "for i in `cat plist.txt` wget --http_proxy ..." не катит ;( Да и какой-нибуть проксь может сдохнуть -> нужно повторить тот же запрос через другой...
>>
>>Так а что за вопрос-то? Сделать всё за Вас?
>>
>>P.S. Немного подумать и написать скрипт на shell/perl не вариант?
>
>Я думал, возможно, кто-то либо знает доп. возможности вгета, либо сталкивался с
>подобной задачей и посоветует готовое решение. Скрипт-то я напишу, если никто
>ничего не подскажет, но по сути это получится полностью самописная качалка.
>

ну да :) а вы что думали что кто то будем писать специально под считанное кол-во людей возможность в вгете для качалки с рапиды или других файл обменников :) конешно писать самому и причем там очень мало кода будет - можно даже и вгет не юзать а просто написать свой скримпт полностью для такого выкачивания :) - удачи

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

4. "wget & список прокси"  
Сообщение от Wing email(ok) on 26-Ноя-07, 15:42 
>[оверквотинг удален]
>>подобной задачей и посоветует готовое решение. Скрипт-то я напишу, если никто
>>ничего не подскажет, но по сути это получится полностью самописная качалка.
>>
>
>ну да :) а вы что думали что кто то будем писать
>специально под считанное кол-во людей возможность в вгете для качалки с
>рапиды или других файл обменников :) конешно писать самому и причем
>там очень мало кода будет - можно даже и вгет не
>юзать а просто написать свой скримпт полностью для такого выкачивания :)
>- удачи

Да там не рапида, там на полтерабайта закачечка... Лан, спасибо, будем писать ;)

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Индекс форумов | Темы | Пред. тема | След. тема
Оцените тред (1=ужас, 5=супер)? [ 1 | 2 | 3 | 4 | 5 ] [Рекомендовать для помещения в FAQ]




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2025 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру