Главная страница
Top.Mail.Ru    Яндекс.Метрика
Текущий архив: 2006.04.09;
Скачать: CL | DM;

Вниз

Прошу оценить и высказать личное мнение   Найти похожие ветки 

 
Gero_   (2005-12-07 20:04) [40]


> Дело в том что если вы заходите 9, 19, 29, 39, 49, 59 минуте
> каждого часа, то в это время запускается скрипт проверки
> в много потоковом режиме

А в фоне его никак нельзя запускать?


 
Lamer@fools.ua ©   (2005-12-07 20:56) [41]

>А в фоне его никак нельзя запускать?

Если уж в фоне, то имеет смысл проверять постоянно (а не каждые 10 минут) меняющиеся порции проксей, IMHO. Может так даже лучше было бы...


 
Delphi5.01 ©   (2005-12-08 01:13) [42]


> А в фоне его никак нельзя запускать?

Прошу прошения, оговорился, я хотел сказать в фоновом режиме, но дело в том что в фоновом режиме запускаются скрипты которые обращаются к сайту через протокол http, а этого избежать почти не возможно, разве что зарегистрировать другой сайт и скрипты проверки перебросить дута

Сейчас самый сложный этап, скрипт который позволит проверять базу из 300.000 прокси серверов. Довольно сложная задача, а главное трудно тестировать, при запуске 1000 фоновых скриптов, сервак подвисает на макс. 30 секунд. Думаю надо искать более мощный сервер


 
VEG ©   (2005-12-08 15:53) [43]

>Delphi5.01 ©   (07.12.05 06:51) [35]
Я предлагаю интегрировать автообновление списка прокси для расширения ScrapBook. Если авторы расширения примут его - все юзеры этого расширения (а их много) автоматом будут пользоваться твоим сервисом, т.к. расширения сами обновляются время от времени.


 
VEG ©   (2005-12-08 15:54) [44]

>Delphi5.01 ©   (07.12.05 06:51) [35]
Я предлагаю интегрировать автообновление списка прокси для расширения ScrapBook. Если авторы расширения примут его - все юзеры этого расширения (а их много) автоматом будут пользоваться твоим сервисом, т.к. расширения сами обновляются время от времени.


 
Delphi5.01 ©   (2005-12-08 17:29) [45]


> Я предлагаю интегрировать автообновление списка прокси для
> расширения ScrapBook. Если авторы расширения примут его
> - все юзеры этого расширения (а их много) автоматом будут
> пользоваться твоим сервисом, т.к. расширения сами обновляются
> время от времени.

Выглядит заманчиво, если не сложно можете описать более подробно как данный сайт можно связать с моим ресурсом и что есть "расширения"?


 
VEG ©   (2005-12-09 19:55) [46]

http://www.roundtwo.com/product/switchproxy


 
Delphi5.01 ©   (2005-12-11 02:20) [47]

Деловое предложение было отправлено тех. службе SwitchProxy. Вполне возможно скоро наши пользователи будут иметь еще один хороший продукт :-)


 
Delphi5.01 ©   (2005-12-11 06:53) [48]

Проблема с зависанием веб сайта на 30 секунд каждые 10 минут при процессе проверки была решена переносом скрипта проверки на другой домен.


 
Delphi5.01 ©   (2005-12-13 05:02) [49]

Пре релиз, через 3 дня в случае положительного результата тестирования нового скрипта, proxy-list.org перейдет на новый движок.
Главный девиз, "только рабочие прокси" и "проверка каждые 10 минут" остаются в силе, но добавилась новая возможность. Теперь на сервере работает два скрипта, первый по прежнему работает с главное базой, обеспечивая проверку рабочих прокси. Но второй скрипт работает каждые 5 минут, и при каждом запуске проверяет 1000 прокси, в результате получаем 5000 прокси в час, думаю данная скорость впечатляет :-) Можно поднять и до 10000 но в этом случае результат будет не очень точный (latency).
Так что ждем :-) При желании можно следить за процессом разработки на сайте http://proxylist.gesoft.org. При открытии сайта возможны ошибки, так как данный сайт является только тестовым макетом, при обнаружении ошибки прошу сообщить по адресу administrator@proxy-list.org
Главной новостью можно считать что был найден человек предоставляющий нам базу проксей больше 80.000, конечно прокси будут добавляться постепенно, дабы проверить работоспособность скрипта при больших объемах.


 
Delphi5.01 ©   (2005-12-14 07:10) [50]

Остался одни день, пробный вариант будущего сайта можно посмотреть здесь.
http://proxylist.gesoft.org
В базе на данный момент 3500 прокси из них 430 рабочих  Пока что скрипт проверки работает без сбоев, надеюсь до конца тестирования ничего из разряда сюрпризов не произойдет
Теперь нужна фишка сортировки прокси листа по разным параметрам (кроме Latency, который как я заметил мало важный).


 
Delphi5.01 ©   (2005-12-14 21:35) [51]

# Сайт был переведен на новый движок. Следовательно, теперь прокси будут проверяться двумя скриптами вместо одного.
Скрипт 1 будет проверять рабочие прокси каждые 10 минут, как это делалось прежде.
Скрипт 2 будет проверять 1000-2000 мертвых прокси каждые 5 минут (они будут выбирается, соответствуя качеству, которое высчитывается специальной формулой).
Причина, по которой есть смысл проверять мертвые прокси проста, основываясь на нашей статистике существует большая вероятность того что прокси оживет через определенное время. Простым математическим вычислением мы имеем каждый час 12.000-24.000 проверенных прокси.
# В базу было добавлено 2900 новых прокси.
# В связи с большим количеством рабочих прокси (400), было приято решение выводить 40 на одной странице.


 
Gero ©   (2005-12-14 22:42) [52]


> 40 на одной странице

А зачем так много, если известно, что все они рабочие?


 
Kerk ©   (2005-12-14 22:53) [53]

Еще было бы классно добавить кнопочку для фильтрации "показывать только анонимные прокси / все прокси"


 
Delphi5.01 ©   (2005-12-15 00:37) [54]

>> 2 Gero
Вы наверно будете смеяться, но сначала мы думали разместить только 20, но потом увидев что количество страничек получается очень много увеличили данное число до 40. А что касается работоспособности то 99.9% прокси должны работать, кроме варианта когда прокси умирает пока вы его скопируете с сайта и запишите в свои настройки :-)
А какое количество прокси вы предлагаете разместить?

>> 2 Kerk
Фильтрация это очень важная примочка. Мы как раз работаем над данным вопросом, просто вместо простой фильтрации хотим сделать поиск, или другими словами фильтрация по нескольким полям одновременно :-)

п.с. Также мы работаем над добавлением ещё одной опции у прокси High Anonymous и конечно поддерживает ли данный прокси SSL


 
Gero_   (2005-12-15 00:45) [55]


> Delphi5.01 ©   (15.12.05 00:37)

Я не могу понять зачем вобще такой большой список.
Ну вот мне нужен прокси, я зашел на сайт, скопировал первый попавшийся.
А остальные зачем?


 
Delphi5.01 ©   (2005-12-15 01:13) [56]


> Я не могу понять зачем вобще такой большой список.
> Ну вот мне нужен прокси, я зашел на сайт, скопировал первый
> попавшийся.
> А остальные зачем?

Я вообще как то об этом не задумывался :-) Данный список может подойти только тем кто пытается например скачать файлы с рапидшары, ну или нужно для какого-то менеджера закачек. Вообще надо подумать, зачем выводить такой большой список, единственное что мне приходит в голову так это то что пользователю может нужен прокси например анонимный с определённого региона или с определённым ИП. В одном вы правы, ни кто на вторую страницу переходить даже и не будет.


 
Delphi5.01 ©   (2005-12-18 18:36) [57]

18 Декабря 2005
На сайте была добавлена новая опция. Теперь стало возможным искать прокси по следующим параметрам: порт, тип и страна.
Около 1500 новых прокси было добавлено в базу.


 
Delphi5.01 ©   (2005-12-21 01:01) [58]

20 Декабря 2005
Новый прокси тип “ Elite ” был добавлен к “ Proxy type ”.
Было добавлено описание каждого типа прокси: transparent , anonymous и elite.


 
Alexx_   (2005-12-23 20:48) [59]

Сенкс, просто и удобно


 
Shuric ©   (2005-12-23 21:17) [60]

Шрифты смени (типа Time New Roman смотрятся не очень)


 
Alexx_   (2005-12-29 15:09) [61]

Shuric
А какой шрифт посоветуете?
Есть обновления на сайте: 28 Декабря 2005
   * Был добавлен таймер с автоматическим обновлением странички.
   * Около 3600 новых прокси было добавлено в базу.


 
Delphi5.01 ©   (2005-12-29 15:14) [62]

Вот и меня опередили, спасибо Алекс, добавлю что скоро на сайте будет проверяться до 3000 прокси за 30 сек. Разрабатываем новый движок.
Попытаемся сменить шрифт, хотя думаю к такому сайту навороченный шрифт не подойдет


 
Джо ©   (2005-12-29 22:04) [63]

Имхо, шрифт без засечек будет лучше смотреться для такого мелкого кегля. Например: Тахома, Вердана, Arial.


 
Джо ©   (2005-12-29 22:06) [64]

Эх, блин, хоть бы один прокси в UA :(


 
VictorT ©   (2005-12-29 22:28) [65]

О, уже пригодился сайтик. Почему-то на poezda.net только через прокси могу зайти. У всех так?


 
Gero ©   (2005-12-29 22:34) [66]


> Джо ©   (29.12.05 22:06)
> Эх, блин, хоть бы один прокси в UA :(

А зачем?


 
VictorT ©   (2005-12-29 22:36) [67]


> А зачем?

Трафик халявный, видимо. Да и на скорости, возможно,  сказывается.


 
Gero ©   (2005-12-29 22:38) [68]


> Delphi5.01 ©   (29.12.05 15:14)

Могу предложить свой вариант дизайна. Если понравится — возьмешь, не понравится — не возьмешь.
Или ты только свой хочешь?


 
Джо ©   (2005-12-29 23:09) [69]


>  [66] Gero ©   (29.12.05 22:34)
> А зачем?

А зачем мне другой? Ума не приложу. Украинский хоть бы пригодился теоретически, по причине, указанной [67] VictorT. А так прямо и не знаю, зачем мне бы нужен был :)


 
VictorT ©   (2005-12-29 23:16) [70]


>  так прямо и не знаю, зачем мне бы нужен был :)

Может, по причине, указанной [65] VictorT ?


 
Джо ©   (2005-12-29 23:19) [71]


>  [70] VictorT ©   (29.12.05 23:16)

У меня открывается :p
И что, много таких сайтов, что для их просмотра нужны какие-то громадные списки проксей? Чтобы не оффтопить, завожу отдельную ветку.


 
Lamer@fools.ua ©   (2005-12-29 23:59) [72]

>>Джо ©   (29.12.05 22:06) [64]

Я знаю один. Пробовал пару раз. Когда никогда работает, вроде. Тип: elite, AFAIR.


 
isasa ©   (2005-12-30 00:10) [73]

Джо ©   (29.12.05 23:19) [71]

И что, много таких сайтов, что для их просмотра нужны какие-то громадные списки проксей?


Дело не в сайте. Просто для выбора оптимального, для своего IP, прокси, нужго протестировать довольно большой список. Так как, повторюсь, приведенный на сайте список прокси свидетельствует только о том, что по указанным IP, прокси есть. И они тестируются с указанными характеристиками. С твоего IP картина будет совершенно другой.
К чести авторов, из списка анонимных, с моего IP протестировались положительно все(редкий случай). Тайм-ауты другие.


 
Delphi5.01 ©   (2006-01-07 09:13) [74]

Привет всем,
В новом году была попытка переехать на новый хостинг, на русский, что дало бы возможность проверять и русские прокси без проблем, но возникли проблемы, в новом хостинге другие правила и скрипт проверки почти не может под них работать, по это причине начали работу над 3.0 версией движка, на этот раз у пользователей даже будет возможность следить за нагрузкой сервера, как проверяются прокси, это так для прикола, а то многие до сих пор не верят что мы проверяем до 1000 прокси каждые 10 минут.


 
VEG ©   (2006-01-07 22:59) [75]

Как там дела с расширением SwitchProxy и автообновлением списка для его?


 
Delphi5.01 ©   (2006-01-08 02:36) [76]

К сожалению мы не пришли к нужному соглашению, мы теперь думаем создать маленькую утилиту под винды которая сама автоматом будет менять прокси в настройках браузеров и будет сидеть в трее :-)


 
Nik8. ©   (2006-01-08 07:38) [77]

Респект


 
Delphi5.01 ©   (2006-01-09 08:18) [78]

Nik8
Спасибо, скоро вы увидите сайт на новом движке вот потом это действительно будет супер


 
DeMoN-777 ©   (2006-01-10 06:18) [79]

Фигня


 
Delphi5.01 ©   (2006-01-10 07:34) [80]


> DeMoN-777 ©   (10.01.06 06:18) [79]
>
> Фигня

Большое спасибо за ваше мнение. Вас надо в красную книгу занести :-) Вы первый из более чем 200 человек у которого такое впечатление осталось о сайте. Здесь возможны два варианта, вы оценили дизайн или вы оценили содержимое. В обоих случаях вы в красной книге нашего сайта ;-)



Страницы: 1 2 3 вся ветка

Текущий архив: 2006.04.09;
Скачать: CL | DM;

Наверх




Память: 0.64 MB
Время: 0.052 c
4-1137699457
Rust007
2006-01-19 22:37
2006.04.09
MS Agent


5-1129100926
MegaVolt
2005-10-12 11:08
2006.04.09
Виртуальная канва. Как реализовать?


2-1143047641
Adios
2006-03-22 20:14
2006.04.09
вопрос насчёт других приложений


2-1143209076
nnm
2006-03-24 17:04
2006.04.09
Декриптование


8-1129797644
dizard
2005-10-20 12:40
2006.04.09
Проблема с увеличением графических фигур