[Скрипт] Парсер пользователей с воблы

[MySexy]

Данный скрипт был написан для сбора логином с оф.форума ПВ (в многопоточном режиме на PHP), как сейчас потерял актуально выкладываю, может кому пригодиться

Используются curl_multi что позволяет увеличить скорость и главное уменьшаться время на парсинг страниц

<?php
/*
 * by MySexy for http://zhyk.ru
 * 2010
 * скрипт сбора логинов с офф.форума pwonline.ru
 */


class parser_forum_pwonline {
	
	private  $login_forum = '';
	private  $login_forum = '';
	
	public function curl_multi () {

		$urls = array();
		# в переменой $count_pages_forum количество страниц
		$count_pages_forum = 10;
		for ($i=1; $i <= $count_pages_forum; $i++) {
			$urls[] = 'http://forum.pw.mail.ru/memberlist.php?&order=asc&sort=username&page='.$i;
		}

		$threads = 3;
		$timeout = 30;

		$mcurl = curl_multi_init();
		$threadsRunning = 0;
		$urls_id = 0;

		while (true) {

			while ($threadsRunning < $threads && $urls_id < count($urls)) {
				$ch = curl_init();
				curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
				curl_setopt($ch, CURLOPT_TIMEOUT, $timeout);
				curl_setopt($ch, CURLOPT_URL, $urls[$urls_id++]);
				curl_multi_add_handle($mcurl, $ch);
				$threadsRunning++;
			}

			if ($threadsRunning == 0 && $urls_id >= count($urls))
				break;

			curl_multi_select($mcurl);
			while(($mcRes = curl_multi_exec($mcurl, $mcActive)) == CURLM_CALL_MULTI_PERFORM) usleep(100000);
			if($mcRes != CURLM_OK) break;
			while($done = curl_multi_info_read($mcurl)) {
				$ch = $done['handle'];
				$done_url = curl_getinfo($ch, CURLINFO_EFFECTIVE_URL);
				$done_content = curl_multi_getcontent($ch);
				if(curl_errno($ch) == 0) {
					preg_match_all("#member.php?(.*?)\">(.*?)</a>#si", $done_content, $m_s_1);
					file_put_contents('user.db', file_get_contents('user.db')."\n".implode("\n",$m_s_1['2']));
					echo "{$done_url} YAE SEARCH<br>\n";
					flush();
					sleep(5);
					
				} else {
					echo "Link {$done_url} failed: ".curl_error($ch)."<br>\n";
					flush();
				}
				curl_multi_remove_handle($mcurl, $ch);
				curl_close($ch);
				$threadsRunning--;
			}
		}
		curl_multi_close($mcurl);
		echo 'Done.'; 
	
	}

}

echo '<pre>';
$p_m_r = new parser_forum_pwonline();
$p_m_r -> curl_multi ();