Форум Московских Сетей - Possum Forum-Z

Нужен ли Порталу свой FTP Поисковик?

Вопрос назрел в основном потому, что напрягают моменты, когда оба имеющихся робота в дауне.

Ну и плюс всё в одном месте

када акрадий лежит - галимо. а слаиковский ваще хз когда работал в последний раз..

Да, так как очень был расстроен сегодня узнав что оба валяются((

согласен, нужен.

Нужно!!! 100%!!!

Итак, видимо приветствуем новый поисковик!!! =)) только он сервак не сльно загрузит??? а то пипец буит... могу себе поставить иф ю вонт

2 Ledosen: смысл как раз в целостности Портала.

ЗЫ: тока ещё предстоит найти подходящую программу, т.к., честно скажу, ни Аркадиевский (точнее - Ареша), ни TZ-шный поисковики мне не очень нравятся - у обоих минусов хватает, и делать "клон" какого-нибудь из них смысла не вижу... хотя, тут я готов рассмотреть предложения, т.к. сделать "копию" какого-нить из имеющихся роботов - гораздо быстрее и проще - технология проверенная и отладенная.

ну ежли написать в инете фтп поисковик, то результ-скриптов будет до ежа.. тока хз, как они пашут

Нужен стопудово! Может слаековский скрипт на серв поставить? Меня в своё время порадовало жутко клиентом искать - удобно, быстро и просто

спрашивал - слаик свои скрипты, мягко говоря, продолбал
а новую версию так никак не закончит - у него последний курс, госы и диплом...

если сделаешь лучше чем старые то нужен иначе в отстой.. вообщем тестовую версию в студию

oблачко писал(а):если сделаешь лучше чем старые то нужен иначе в отстой.. вообщем тестовую версию в студию

вот это и обсуждается - делать ли клон (просто, по статистике, сейчас Портал работает стабильнее всего (тьфу*3 и респект Корвету за полностью обновлённую инфраструктуру)) или что-то ещё?

если второй вариант - то что именно (сам писать не буду, потому ищется готовое решение для внедрения - оно 100% есть, вопрос его найти)?

ЗЫ: ветром навеяло вспомнив о стабильности - а ни у кого старого или честно скамунижженного UPS-а не будет? сервер запитать (там и полусевшего хватит - нагрузка копеечная).

Значит так.
У поисковика, написанного Ильичом (он же - Дасти, он же - Ареш) есть малозначительные недостатки, но в целом он лучше чем остальные. Больший недостаток здесь в том, что сервер у аркадия работает не круглосуточно. А мы - птицы ночные. Да и у Дасти работал сервак не круглосуточно...
Меня последнее время бесит поисковик Вылд Вулфа. когда он сканирует мой фтп - комп жутко тормозит, даже мышка прилипает к экрану. ОДнако когда поисковик Ильича сканил мой фтп еще на 500м амд, комп почему-то не тормозило.
По этому поводу я поговорил с Дасти, он ответил примерно следующее: писалось на коленке на каком нибудь скриптовом языке, видимо, потому и тормозит. Я его спросил на чем писал он. Он ответил оба модуля бинарники и написаны на Си. хотя интерфейсный блок, наверное всё таки было разумнее делать на перле или пхп. Интерфейсный блок был подрублен к апачу в качестве CGI программы.
В общем ребят, у меня была мысля написать свой поисковик еще давно... Да видимо пока я собирусь... мне это в ряд ли по силам будет. Хотите писать - пишите, если получится. Если сканер будет тормозить мой комп - забаню как WW. Если новый поисковик будет не хуче чем те - я это тлько приветствую. Хотя по идее можно поисковик Дасти переместить на сервер Possum.ints.ru, если он будет не против...

Я тут в какой-то темке уже писал о планируемом новом поисковике (точнее даже, поисковой системе) - сейчас цитату приведу:

Что ещё хочу сказать - с моим другом (тоже из сетки нашей + в одной группе учимся Happy ) у нас есть идея создания могучей искалки по FTP сети, которую планируем начать реализовывать летом. Коротко суть такая: в каждой подсети есть невыключаемая машина с "куском" искалки - она осуществляет поиск по подсети и имеет web-интерфейс (а может и клиентскую часть как у Slay'ee'k-а), с которого можно искать. Информацию о содержании FTP других подсетей она берёт с тамошних "кусков". Сымсл такой "распараллеленой" системы в следующем: 1) в каждой подсети есть СВОЙ поисковик - к нему быстрее обращаться, 2) если подсеть "отваливается" от остальной сети - то внутри подсети по прежнему можно искать, 3) нагрузка на каждый узел искалки гораздо меньше - внутри подсети НЕТ ограничений, а синхронизация баз данных происходит во время наименьшей загруженности сети и гораздо менее требовательна, чем опрос "удалённых" FTP.

Вот такие пироги. Сама искалка будет писаться на Си, база - скорее всего MySQL, веб-составляющие (то, что принимает запросы от пользователей) - PHP.

Коротко суть такая: в каждой подсети есть невыключаемая машина с "куском" искалки

А можно такой тупой вопрос: вы сами в каждую подсеть по невыключаемой машине с искалкой поставите? Или корвет вам поможет? Или пиханёте её к существующим невыключаемым сервакам (а такие есть к каждой подсетке? + владельцы согласны?)
Может разместить на отдельной единственной машине, и попросить корвет снять ограничение по скорости для неё? Или вообще разместить на корветовском серваке? Так конечно несколько плюсов уйдут, но это тож вариант.

фигась сколько знаков вопросительных получилось...

А вообще идея классная, разделить поиск по подсеткам! А то вечно шлюз отваливается, а локаклка пашет.