|
|
Возраст: 37  C нами с 08.01.2006 Репутация: 128.1  
|
|
Di писал(а): |
хм, а не дурный поисковик.
Вопросик: Он сканит всю сеть в поисках сайтов или только вложенные в него "кем-то" ссылки?
|
Нет, он не сканит всю сетку. Я забиваю в него адреса вручную. Причиной этому стал мой пробег по http-ресурсам сетей, там много мусора оказалось, форумы с 3-мя сообщениями, косые чаты, сайты пол года на реконструкции и т.д.
2 Babushka
У меня есть пара вопросов по базам...у тебя ася есть?
|
|
|
|
|
 |
|
|
 C нами с 19.04.2005 Репутация: 126.7  
|
|
MinDeR писал(а): |
хм, а не дурный поисковик.
|
Согласен.
MinDeR писал(а): |
Нет, он не сканит всю сетку. Я забиваю в него адреса вручную.
|
А какие, если не секрет? Если можно, списочек.
|
|
|
|
|
 |
|
|
 C нами с 27.05.2005 Репутация: 231.9  
|
|
Администратор ресурса, результат поиска некорректно отображается в Mozilla Firefox, отсутствует полоса прокрутки.
Спасибо за поисковик.
|
_____________________________ Презираю сетевых троллей!
Прокачай свой unsorted.ru!
Ты активный сидер? Часто, а главное качественно выкладываешь видео новинки? Устал от монотонного оформления раздач? Не беда! Теперь Фильмонайзер оформит всё за тебя!
|
|
|
|
 |
|
|
|
по-моему Datapark может из разных баз отдавать результаты. Вы скооперируйтесь есть машинка слабенькая.
иммею ввиду пул из indexer'ов и бд + 1 search c большим индексом в памяти
|
|
|
|
|
 |
|
|
Возраст: 37  C нами с 08.01.2006 Репутация: 128.1  
|
|
konst писал(а): |
А какие, если не секрет? Если можно, списочек.
|
http://edem.aviel.ru/forum/viewthread.php?tid=17
Цитата: |
Администратор ресурса, результат поиска некорректно отображается в Mozilla Firefox, отсутствует полоса прокрутки.
|
Проверим и, если что исправим, вчера была настройка интерфейса, возможно вы неудачно попали
Цитата: |
по-моему Datapark может из разных баз отдавать результаты. Вы скооперируйтесь есть машинка слабенькая.
иммею ввиду пул из indexer'ов и бд + 1 search c большим индексом в памяти
|
Датапарк не чита mnogosearch. Он тоже может отдавать результаты из кучи баз, но опрашиваются эти базы последовательно.
А вообще можно попробовать что-то вроде.
http://www.mysql.com/products/cluster/
Эта вещь более низкоуровнева, а значит более надёжна, ИМХО.
|
|
|
|
|
 |
|
|
Возраст: 37  C нами с 08.01.2006 Репутация: 128.1  
|
|
|
|
|
 |
|
|
Возраст: 42  C нами с 20.09.2004 Репутация: 177.6  
|
|
MinDeR, для какого User-agent разрешить индексацию на unsorted.ru?
|
_____________________________ Ищу работу в Жуковском.
|
|
|
|
 |
|
|
Возраст: 50  C нами с 27.01.2005 Репутация: 129.4  
|
|
baldahin писал(а): |
MinDeR, для какого User-agent разрешить индексацию на unsorted.ru?
|
Да он, похоже, MSIE/98 прикидывается, блин. Огребая все шапки и разметку.
|
_____________________________ "Загнанную в угол крысу пристреливают"
|
|
|
|
 |
|
|
Возраст: 41  C нами с 03.05.2005 Репутация: 122.9  
|
|
MinDeR, baldahin, эмм... в указанном списке имеет место быть пт.ансортед. А сейчас вроде просто ансортед...
|
_____________________________ Nobody expects the Spanish Inquisition!
|
|
|
|
 |
|
|
Возраст: 42  C нами с 20.09.2004 Репутация: 177.6  
|
|
MinDeR на freeforum писал(а): |
Вроде закончил Не проиндексированы те ресурсы, для которых запрещена индексация(FreeForum, Unsorted и т.д.).
|
я так понял, что поисковик всё-таки обращает внимание на robots.txt
|
_____________________________ Ищу работу в Жуковском.
|
|
|
|
 |
|
|
Возраст: 38  C нами с 14.10.2004 Репутация: 94.1  
|
|
Если не ошибаюсь, то прикидывается он так:
|
|
|
|
|
 |
|
|
Возраст: 37  C нами с 08.01.2006 Репутация: 128.1  
|
|
ZoRG писал(а): |
Если не ошибаюсь, то прикидывается он так:
|
Zorg, именно так.
Цитата: |
я так понял, что поисковик всё-таки обращает внимание на robots.txt
|
Да, обращает. Это должен делать каждый уважающий себя паук
Цитата: |
эмм... в указанном списке имеет место быть пт.ансортед. А сейчас вроде просто ансортед...
|
Поправил, но сути дела это не меняет.
Цитата: |
MinDeR, для какого User-agent разрешить индексацию на unsorted.ru?
|
Для агента, который написал Zorg. NutchCVS. Хотя намного надёжнее прописать ip-адрес.
|
|
|
|
|
 |
|
|
Возраст: 37  C нами с 08.01.2006 Репутация: 128.1  
|
|
Проиндексирован unsorted.ru
Количество страниц в базе состовляет 379790
|
|
|
|
|
 |
|
|
C нами с 06.07.2008 Репутация: 42.2  
|
|
|
|
|
 |
|
|