Главная страница
Top.Mail.Ru    Яндекс.Метрика
Текущий архив: 2005.01.30;
Скачать: CL | DM;

Вниз

Определение изменения Web-страницы   Найти похожие ветки 

 
Sergey18   (2004-11-09 13:18) [0]

Суть проблемы:
Есть программа, которая закачивает себе содержимое страниц с разнообразных сайтов в БД. Если страничка осталась неизменной, то она пропускается. Если изменилась, то она снова заносится в базу. Это я в общем плане, но суть не в этом. Проблема в определении изменения страницы:
* Возможно ли определить изменилась ли страница или нет, не загружая ее целиком? По содержимому страницы определять новизну невозможно по двум причинам:
1) База планируется большая. Запросы для сравнения будут выполняться очень долго.
2) Для экономии трафика. Чтобы каждый раз не заходить на одну и ту же страницу.

Возможно, это можно определять каким-либо образом по дате изменения или размеру страницы? Возможно ли получить каким-то образом эти данные от Web-сервера?

Спасибо.

p.s. Ведь как-то это делают различные Web-Downloader"ы...


 
panov ©   (2004-11-09 13:35) [1]

Использовать метод HEAD для получения заголовка страницы.


 
Sergey18   (2004-11-10 00:00) [2]

Чем мне может помочь метод HEAD? Ведь возможно, что в странице был изменен текст, а TITLE остался прежним?..



Страницы: 1 вся ветка

Текущий архив: 2005.01.30;
Скачать: CL | DM;

Наверх




Память: 0.47 MB
Время: 0.029 c
1-1105983045
Dimon 33321
2005-01-17 20:30
2005.01.30
Послать сообщение Paint форме


1-1106041657
hgd
2005-01-18 12:47
2005.01.30
Ошибка на CoInitialize;


1-1106129788
vint45
2005-01-19 13:16
2005.01.30
Проблема с дебагом


14-1105518621
Tornado
2005-01-12 11:30
2005.01.30
Помогите с PHP


1-1105691044
Zilog
2005-01-14 11:24
2005.01.30
Можно ли текстоввый файл запихнуть в DLL?