YaCy поисковик прямо на вашем компьютере

[danil]

Сайт: https://yacy.net и его сообщество https://community.searchlab.eu/ (на форуме есть чел, который на русском отвечает, прошаренный юзер YaCy)

Отлично ищет и имеет интересные возможности. По проге очень скудная документация, но со временем, когда наиграюсь, я сделаю про нее сайт на русском с описанием основных настроек и функций.

Зачем нужна YaCy? Представьте что можете скачать себе на комп поисковик, загрузить список сайтов, настроить робота и потихоньку индексировать эти сайты. Можно настроить, чтобы поисковой робот периодически индексировал новые страницы сайтов.

Есть 2 режима, P2P, типа вы ищете в базе других пользователей, а они в вашей. Получается у каждого по кусочку поисковика. Мне это не подходит, потому что меня интересуют только определенные сайты. Вы наверное уже догадались что я хочу сделать. Да, второй режим он одиночный и я могу использовать это ПО для обеспечения поисковика на своем old-web, заменив тот что есть сейчас.

Yacy можно будет встроить на свой сайт, обращаясь к своей копии YaCy через API. Список сайтов буду брать из каталогов и рейтингов. Приоритет будет для новых сайтов, маленьких, делающихся на энтузиазме отдельными вебмастерами.

Я буду добавлять в этот пост свои индексы, импортировав их к себе вы сможете искать по таким сайтам:
1) Сайты narod.ru: https://wdfiles.ru/2OCob (52,749 сайтов)
2) продолжение следует...

Инструкция для иморта: Import this file by moving it to DATA/SURROGATES/in

[.::. Typucm .::.]

danil, "Сайты narod.ru: https://wdfiles.ru/2OCob (52,749 сайтов)"
звучит немного страшно ) сколько весит, интересно? по смыслу, если без мегамонстров, то на один сайт максимум 100кб-1мб.
В идеале такие поисковики использовать не на основной машине, на самого себя досье собирать (при использовании локального поиска) как-то не очень

[danil]

danil, "Сайты narod.ru: https://wdfiles.ru/2OCob (52,749 сайтов)"
звучит немного страшно ) сколько весит, интересно? по смыслу, если без мегамонстров, то на один сайт максимум 100кб-1мб.
В идеале такие поисковики использовать не на основной машине, на самого себя досье собирать (при использовании локального поиска) как-то не очень

около 200 мегабайт, это не же не копии страниц, это текстовая информация про ссылки, чтобы производить по ним поиск через YaCy. На счет собирать на себя досье не понял. наоборот у тебя же локальный поисковик, опен сорсный, это ведь безопаснее.

[zabil_skazat']

Исходный код проверил лично?

[danil]

Исходный код проверил лично?

Можешь сам проверить если тебе надо, я выразил свое мнение, что опен сорсу больше доверяю. В конце концов можно на виртуалку поставить и запускать когда надо. Вон люди телеграму доверяют, хотя хз что он там на фоне может делать.

Если бы даже я лично проверил, ты бы усе равно мог бы выразить недоверие моим словам, так что тут дело не в доказательствах, а в твоем негативном отношении.

[Luntyk]

(52,749 сайтов)

Много, а где получилось найти ещё 20000 сайтов (по сравнению со списком из темы НДР)?

[danil]

(52,749 сайтов)

Много, а где получилось найти ещё 20000 сайтов (по сравнению со списком из темы НДР)?

Я перепутал, 52749 страниц.