Вопрос по проксям
Добрый.
Постараюсь расписать все максимально подробно…
Цель:
Есть определенный софт. который работает в многопоточном режиме с использованием прокси серверов. Чем больше проксей тем больше потоков.
Есть сервер на вин 2003 с хорошим каналом и достаточным конфигом для моих задача.
нужно использовать софт максимально результативно (сбор данных в основном… проверка параметров некоторых доменов через софт).
Вопросы:
1. Первый вариант представляю себе так:
берется VDS на линуксе. покупается сто дополнительных айпи и поднимается прокси сервер (сквид например).
Вбивается эта сотня в прогу на вин 2003 и все дела. 100 потоков. 100 проксей. все летает. проц легко справляется.
Но из этого пункта вытекают следующий вопрос:
-хватит ли мощей VDS для обработки этих сто проксей? это ведь постоянное движение… кэширование… чего там будет расходоваться более всего? (всего 100 движений одновременно… задачи две… первое обмен будет легкой информациией (парметры доменов и сами домены это байты… думаю проблем не будет)… а вторая задача уже скачка на 1 поток до 100 кб.).
2. Второй вариант заключается в поднятии прокси-сервера прямо на вин 2003 сервере. Вместо 100 ставим 20-30 IP. Выигрывает за счет внутренней передачи и мощного процессора.
Постараюсь расписать все максимально подробно…
Цель:
Есть определенный софт. который работает в многопоточном режиме с использованием прокси серверов. Чем больше проксей тем больше потоков.
Есть сервер на вин 2003 с хорошим каналом и достаточным конфигом для моих задача.
нужно использовать софт максимально результативно (сбор данных в основном… проверка параметров некоторых доменов через софт).
Вопросы:
1. Первый вариант представляю себе так:
берется VDS на линуксе. покупается сто дополнительных айпи и поднимается прокси сервер (сквид например).
Вбивается эта сотня в прогу на вин 2003 и все дела. 100 потоков. 100 проксей. все летает. проц легко справляется.
Но из этого пункта вытекают следующий вопрос:
-хватит ли мощей VDS для обработки этих сто проксей? это ведь постоянное движение… кэширование… чего там будет расходоваться более всего? (всего 100 движений одновременно… задачи две… первое обмен будет легкой информациией (парметры доменов и сами домены это байты… думаю проблем не будет)… а вторая задача уже скачка на 1 поток до 100 кб.).
2. Второй вариант заключается в поднятии прокси-сервера прямо на вин 2003 сервере. Вместо 100 ставим 20-30 IP. Выигрывает за счет внутренней передачи и мощного процессора.