PHP: Производительность параллельного скручивания - RollingCurl против ParallelCurl [закрыто]


У меня есть большое количество запросов cURL для обработки. Я нашел пару библиотек, которые помогают обрабатывать их параллельно, основными из них являются RollingCurl (http://code.google.com/p/rolling-curl /) и параллельный завиток (https://github.com/petewarden/ParallelCurl ).

Есть ли у кого-нибудь опыт работы с этими библиотеками, и если да, то знаете ли вы, какая из них работает лучше?

Спасибо!

ОБНОВЛЕНИЕ: Для всех, кто может наткнуться на это позже, если вы используя групповую функциональность Rolling Curl, кажется, что она ломается при обработке большого количества запросов (50 тыс.+)

Author: Jordan N, 2012-05-07

1 answers

Производительность не является проблемой, так как они оба являются стандартными but функциональными возможностями

  • Процесс группы поддержки rollingcurl, который вы также можете выполнить с помощью простого массива

  • Параллельный завиток я слегка наклоняю прямо вперед.. с дополнительными пользовательскими опциями curl

  • Они Оба Поддерживают обратный вызов

Оба хороши, это зависит от ваших потребностей .....

 0
Author: Baba, 2012-05-07 16:25:02