Страница 1 из 1

YaCy поисковик прямо на вашем компьютере

СообщениеДобавлено: 21 апр 2024, 17:50
danil
Сайт: https://yacy.net и его сообщество https://community.searchlab.eu/ (на форуме есть чел, который на русском отвечает, прошаренный юзер YaCy)

Отлично ищет и имеет интересные возможности. По проге очень скудная документация, но со временем, когда наиграюсь, я сделаю про нее сайт на русском с описанием основных настроек и функций.

Зачем нужна YaCy? Представьте что можете скачать себе на комп поисковик, загрузить список сайтов, настроить робота и потихоньку индексировать эти сайты. Можно настроить, чтобы поисковой робот периодически индексировал новые страницы сайтов.

Есть 2 режима, P2P, типа вы ищете в базе других пользователей, а они в вашей. Получается у каждого по кусочку поисковика. Мне это не подходит, потому что меня интересуют только определенные сайты. Вы наверное уже догадались что я хочу сделать. Да, второй режим он одиночный и я могу использовать это ПО для обеспечения поисковика на своем old-web, заменив тот что есть сейчас.

Yacy можно будет встроить на свой сайт, обращаясь к своей копии YaCy через API. Список сайтов буду брать из каталогов и рейтингов. Приоритет будет для новых сайтов, маленьких, делающихся на энтузиазме отдельными вебмастерами.

Я буду добавлять в этот пост свои индексы, импортировав их к себе вы сможете искать по таким сайтам:
1) Сайты narod.ru: https://wdfiles.ru/2OCob (52,749 сайтов)
2) продолжение следует...

Инструкция для иморта: Import this file by moving it to DATA/SURROGATES/in

Re: YaCy поисковик прямо на вашем компьютере

СообщениеДобавлено: 24 апр 2024, 20:09
.::. Typucm .::.
danil, "Сайты narod.ru: https://wdfiles.ru/2OCob (52,749 сайтов)"
звучит немного страшно ) сколько весит, интересно? по смыслу, если без мегамонстров, то на один сайт максимум 100кб-1мб.
В идеале такие поисковики использовать не на основной машине, на самого себя досье собирать (при использовании локального поиска) как-то не очень :-)

Re: YaCy поисковик прямо на вашем компьютере

СообщениеДобавлено: 24 апр 2024, 22:36
danil
.::. Typucm .::. писал(а):danil, "Сайты narod.ru: https://wdfiles.ru/2OCob (52,749 сайтов)"
звучит немного страшно ) сколько весит, интересно? по смыслу, если без мегамонстров, то на один сайт максимум 100кб-1мб.
В идеале такие поисковики использовать не на основной машине, на самого себя досье собирать (при использовании локального поиска) как-то не очень :-)


около 200 мегабайт, это не же не копии страниц, это текстовая информация про ссылки, чтобы производить по ним поиск через YaCy. На счет собирать на себя досье не понял. наоборот у тебя же локальный поисковик, опен сорсный, это ведь безопаснее.

Re: YaCy поисковик прямо на вашем компьютере

СообщениеДобавлено: 25 апр 2024, 01:16
zabil_skazat'
Исходный код проверил лично?

Re: YaCy поисковик прямо на вашем компьютере

СообщениеДобавлено: 25 апр 2024, 03:03
danil
zabil_skazat' писал(а):Исходный код проверил лично?


Можешь сам проверить если тебе надо, я выразил свое мнение, что опен сорсу больше доверяю. В конце концов можно на виртуалку поставить и запускать когда надо. Вон люди телеграму доверяют, хотя хз что он там на фоне может делать.

Если бы даже я лично проверил, ты бы усе равно мог бы выразить недоверие моим словам, так что тут дело не в доказательствах, а в твоем негативном отношении.

Re: YaCy поисковик прямо на вашем компьютере

СообщениеДобавлено: 25 апр 2024, 08:49
Luntyk
danil писал(а):(52,749 сайтов)

Много, а где получилось найти ещё 20000 сайтов (по сравнению со списком из темы НДР)?

Re: YaCy поисковик прямо на вашем компьютере

СообщениеДобавлено: 25 апр 2024, 18:20
danil
Luntyk писал(а):
danil писал(а):(52,749 сайтов)

Много, а где получилось найти ещё 20000 сайтов (по сравнению со списком из темы НДР)?


Я перепутал, 52749 страниц.