Результаты все лучше и лучше

Результаты все лучше и лучше. Сравните с первым результатом там было 205 всего.

Дальнейшие результаты:

Дальше я опять 2 раза по 260 ответил, видимо где-то упорно ошибаюсь. Провел несколько экспериментов, и правда, путаю технологии создания классов в пхп4 и пхп5. А так же узнал про веб-сервер resin. Потом ответил правильно 275, потом 290. Каждый раз когда проходил тест думал, где же я ошибаюсь. Узнал для себя много нового. Оказывается include возвращает 1 в случае удачи. Не true, а 1. Да уж, видимо в этом и состоит мастерство быть php программистом - помнить все эти мелкие детали, которые не придут в голову здравому человеку.

Далее написал код, который собственно и производит вычисления.

<?php
ob_implicit_flush(true); //Выводить по мере поступления данных
error_reporting(0);  //Буду варнинги, но нам их не надо
set_time_limit(0); //Исполнять до победного конца
 
$handle = fopen('dotcom_list','r'); //исходный файл
 
$time_start = microtime(1);
$i = 0;
while (!feof($handle) and $i < 10) {
$i++;
$buffer = trim(fgets($handle, 4096));
 
$site = 'http://www.'.strtolower($buffer).'.com';
echo 'Checking:'.$site.'... ';
 
$curl = curl_init($site);
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($curl, CURLOPT_FOLLOWLOCATION, 1);
$response = curl_exec($curl);
curl_close($curl);
 
$file = fopen('sites/'.strtolower($buffer).'.txt', 'a+');
fwrite($file, $response);
fclose($file);
echo ' Done!';
}
$time_end = microtime(1);
$time = $time_end - $time_start;
echo 'Обработано: '.$i.' за '.$time.'';
 
$time_start = microtime(1);
$i = 0;
while (!feof($handle) and $i < 10) {
$i++;
$buffer = trim(fgets($handle, 4096));
 
$site = 'http://www.'.strtolower($buffer).'.com';
echo 'Checking:'.$site.'... ';
 
$site_handler = fopen($site, 'r');
if ($site_handler) {
$response = fread($site_handler, 1024);
fclose($site_handler);
} else {
$response = '';
}
 
$file = fopen('sites/'.strtolower($buffer).'.txt', 'a+');
fwrite($file, $response);
fclose($file);
echo ' Done!';
}
$time_end = microtime(1);
$time = $time_end - $time_start;
echo 'Обработано: '.$i.' за '.$time.'';
 
$time_start = microtime(1);
$i = 0;
while (!feof($handle) and $i < 10) {
$i++;
$buffer = trim(fgets($handle, 4096));
 
$site = 'http://www.'.strtolower($buffer).'.com';
echo 'Checking:'.$site.'... ';
 
$headers = get_headers($site);
$response = $headers[0];
 
$file = fopen('sites/'.strtolower($buffer).'.txt', 'a+');
fwrite($file, $response);
fclose($file);
echo ' Done!';
 
}
$time_end = microtime(1);
$time = $time_end - $time_start;
echo 'Обработано: '.$i.' за '.$time.'';
?>

И вот собственно результаты:
10 сайтов:
curl: Обработано: 10 за 15.06
fopen: Обработано: 10 за 70.10
get_headers: Обработано: 10 за 69.23

50 сайтов:
curl: Обработано: 50 за 123.23
fopen: Обработано: 50 за 288.16
get_headers: Обработано: 50 за 249.84

100 сайтов:
curl: Обработано: 100 за 195.53
fopen: Обработано: 100 за 480.05
get_headers: Обработано: 100 за 527.04

Вывод: curl! curl! curl!

Как-то заинтересовавшись SQLite я решил проверить, а не будет ли оно быстрее MySQL, или хотя бы равным по скорости.

Я исходил из того, что SQLite скорее всего будет удобна для мелких таблиц, типа простых счетчиков посещений.
Поэтому провел тесты следующим способом: я пять раз мерял время по 100 циклов обновления записи в базе и пять раз по 100 чтения.

Код тут.

Итак, в статье убеждали: "В последнее время, вы, возможно, слышали о новом расширении для PHP: SQLite. Есть много причин, по которым SQLite может показаться лучшим достижением с тех пор, как научились резать хлеб. SQLite предлагает добротный SQL интерфейс к нерелятивистской базе данных и создаёт элегантную альтернативу громоздким интерфейсам других баз данных без потери функциональности или скорости, как можно было бы ожидать.".

Смотрим что же получилось по тестам…
SQLite MySQL
Запись
0.45911908149719 0.031841039657593
0.46412396430969 0.031555891036987
0.49027895927429 0.029323101043701
0.46884489059448 0.029382944107056
0.50253915786743 0.028644800186157
Среднее
0.47698121070862 0.030149555206299

Чтение
0.026177883148193 0.060520172119141
0.026360988616943 0.059216022491455
0.026273012161255 0.062637090682983
0.026113986968994 0.062775135040283
0.026944160461426 0.062674045562744
Среднее
0.026374006271362 0.061564493179321

Удивительный провал на запись и преимущество в чтении. Однако спасибо ptalus , который пролил свет на это дело. В мануале написано, что для каждой записи файл открывается-закрывается, что и влечет за собой такую тормознутость, однако стоит добавить

sqlite_query($dbhandle, 'BEGIN;');
sqlite_query($dbhandle, 'COMMIT;');

вокруг запроса и время записи просто магически меняется.

Запись:
0.014724016189575
0.014418125152588
0.015676975250244
0.014610052108765
0.014219999313354
Среднее:
0.014729833602905