Главная страница
    Top.Mail.Ru    Яндекс.Метрика
Форум: "Потрепаться";
Текущий архив: 2005.08.21;
Скачать: [xml.tar.bz2];

Вниз

Поиск   Найти похожие ветки 

 
Cerberus ©   (2005-08-01 00:12) [0]

По какому принципу работаю поисковики на сайтах. Если обьём который надо обработать очень велик?


 
Джо ©   (2005-08-01 00:17) [1]


> Если обьём который надо обработать очень велик?

Тогда поисковик пишет: "Не могу обработать ваш запрос. Попробуйте позже". Это если поисковик хороший. Если нет: error in search.php <lh@19u!@kh1kj > msql connect error.@!#!#!@#!@#

:^)


 
Cerberus ©   (2005-08-01 00:24) [2]

Нет просто. Хочу написать поисковик который будет искать на разных сайтах. И думаю что периберать все сайты в момент поиска слишком долго. А хранить всю информацию на своём сервере слишком большой обьём.


 
Джо ©   (2005-08-01 00:34) [3]


>  [2] Cerberus ©   (01.08.05 00:24)
> Нет просто. Хочу написать поисковик который будет искать
> на разных сайтах. И думаю что периберать все сайты в момент
> поиска слишком долго. А хранить всю информацию на своём
> сервере слишком большой обьём.

Ну так тут - или шашечки, или ехать. По секрету скажу: что поисковики ищут по уже готовой базе у себя на серверах. А базу пополняет, так называемый web-spider.


 
DrPass ©   (2005-08-01 00:34) [4]

Да ерунда. В 1997 году поисковик Alta Vista обходился 16 двухпроцессорными Alpha-серверами. А сейчас все намного проще - купил восьмипроцессорный Оптерон с дисковым массивом на десяток терабайт, поставил себе под стол, обеспечил парой выходов в сеть на несколько мегабит каждый, через разных провайдеров. И будет тебе поисковик



Страницы: 1 вся ветка

Форум: "Потрепаться";
Текущий архив: 2005.08.21;
Скачать: [xml.tar.bz2];

Наверх





Память: 0.45 MB
Время: 0.044 c
1-1123129963
dreamse
2005-08-04 08:32
2005.08.21
Проблема с пониманием программы пути


8-1112792366
anat
2005-04-06 16:59
2005.08.21
OpenGL нужна помощь


14-1122669555
Kerk
2005-07-30 00:39
2005.08.21
Что-то старею.. всего 01-45, а я уже спать хочу...


3-1120804272
Goga
2005-07-08 10:31
2005.08.21
Открытие TADODataSet внутри TService


14-1122473064
Андрей Жук
2005-07-27 18:04
2005.08.21
Почитав Софта, я подумал





Afrikaans Albanian Arabic Armenian Azerbaijani Basque Belarusian Bulgarian Catalan Chinese (Simplified) Chinese (Traditional) Croatian Czech Danish Dutch English Estonian Filipino Finnish French
Galician Georgian German Greek Haitian Creole Hebrew Hindi Hungarian Icelandic Indonesian Irish Italian Japanese Korean Latvian Lithuanian Macedonian Malay Maltese Norwegian
Persian Polish Portuguese Romanian Russian Serbian Slovak Slovenian Spanish Swahili Swedish Thai Turkish Ukrainian Urdu Vietnamese Welsh Yiddish Bengali Bosnian
Cebuano Esperanto Gujarati Hausa Hmong Igbo Javanese Kannada Khmer Lao Latin Maori Marathi Mongolian Nepali Punjabi Somali Tamil Telugu Yoruba
Zulu
Английский Французский Немецкий Итальянский Португальский Русский Испанский