Главная страница
Top.Mail.Ru    Яндекс.Метрика
Текущий архив: 2005.01.30;
Скачать: CL | DM;

Вниз

Определение изменения Web-страницы   Найти похожие ветки 

 
Sergey18   (2004-11-09 13:18) [0]

Суть проблемы:
Есть программа, которая закачивает себе содержимое страниц с разнообразных сайтов в БД. Если страничка осталась неизменной, то она пропускается. Если изменилась, то она снова заносится в базу. Это я в общем плане, но суть не в этом. Проблема в определении изменения страницы:
* Возможно ли определить изменилась ли страница или нет, не загружая ее целиком? По содержимому страницы определять новизну невозможно по двум причинам:
1) База планируется большая. Запросы для сравнения будут выполняться очень долго.
2) Для экономии трафика. Чтобы каждый раз не заходить на одну и ту же страницу.

Возможно, это можно определять каким-либо образом по дате изменения или размеру страницы? Возможно ли получить каким-то образом эти данные от Web-сервера?

Спасибо.

p.s. Ведь как-то это делают различные Web-Downloader"ы...


 
panov ©   (2004-11-09 13:35) [1]

Использовать метод HEAD для получения заголовка страницы.


 
Sergey18   (2004-11-10 00:00) [2]

Чем мне может помочь метод HEAD? Ведь возможно, что в странице был изменен текст, а TITLE остался прежним?..



Страницы: 1 вся ветка

Текущий архив: 2005.01.30;
Скачать: CL | DM;

Наверх




Память: 0.47 MB
Время: 0.059 c
1-1106119952
viper_gooz
2005-01-19 10:32
2005.01.30
Двоичное деление


3-1104314031
yaric
2004-12-29 12:53
2005.01.30
Странная ошибка TPFibDatabase


1-1106050411
ShimON
2005-01-18 15:13
2005.01.30
MD5???


14-1105628391
Cosinus
2005-01-13 17:59
2005.01.30
Блин, замучался ужО...


1-1106199128
rosl
2005-01-20 08:32
2005.01.30
заполнение нолями