[identity profile] sviatoy-duhh.livejournal.com posting in [community profile] useful_faq
В связи с кончиной полноценного поиска по блогам от Яндекса, хотел бы задать вопрос ИТ-гуру:
Почему упавшее знамя никто не торопится перехватывать?
Запилить свой сайт с поиском, и рубить бабло на высокой посещаемости, м?

Ок, уточню вопрос: в чем техническая сложность индексировать только один сайт - Livejournal.com?

Date: 2015-10-19 06:05 am (UTC)
From: [identity profile] kraamis.livejournal.com
Потому что запилить свой яндекс с блогами и кинопоиском - это некислая кучка разноцветных бумажек. А учитывая что кончится все также - кому оно надо?

Date: 2015-10-19 07:27 am (UTC)
From: [identity profile] magnus-ff.livejournal.com
Потому что сделанный так, как устроит Кремль поиск по сайтам будет непосещаем: он не будет объективным и релевантным, не будет искать беспристрастно. Ну, не захочется Кремлю видеть в "основных темах" "Заявление Навального".

А так, как Кремль не устроит, уже не потянул и Яндекс.

Date: 2015-10-19 09:35 am (UTC)
From: [identity profile] andvari-loki.livejournal.com
Причём тут какой-то кремль?

Date: 2015-10-19 09:40 am (UTC)
From: [identity profile] magnus-ff.livejournal.com
Действительно. Это же Вашингтон выражал неудовольствие тем, что у главной страницы Яндекса посещаемость выше, чем у ОРТ. А там же, у Яндекса, новости какие-то висят.

Date: 2015-10-19 09:52 am (UTC)
From: [identity profile] andvari-loki.livejournal.com
Не понял. Причём тут какое-то орт. ОРТ - это телевидение. А яндекс - это начальная страница почти всех браузеров.

Date: 2015-10-19 09:58 am (UTC)
From: [identity profile] magnus-ff.livejournal.com
Ясно, понятно.

Date: 2015-10-19 11:01 am (UTC)
From: [identity profile] intac.livejournal.com
Это было бы хорошо такое не видеть. В топах русского жж всяка антипутинская чехарда, навальный и другие креаклиатские стоны

Date: 2015-10-20 07:12 pm (UTC)
From: [identity profile] intac.livejournal.com
конечно хорошо, я рад, что в России демократии в разы больше чем в ес.

Date: 2015-10-19 07:29 am (UTC)
From: [identity profile] benderskiy.livejournal.com
вся планета как-то живёт без этого поиска по блогам и не жалуется

мне интереснее, в чём вообще была причина его создания

Date: 2015-10-19 07:43 am (UTC)
From: [identity profile] rocketsan.livejournal.com
удобно следить за чужим базаром, например

Date: 2015-10-19 07:45 am (UTC)
From: [identity profile] benderskiy.livejournal.com
а смысл? почему это нигде в мире больше не востребовано?

какая-то специфическая черта русской культуры?

Date: 2015-10-19 07:48 am (UTC)
From: [identity profile] rocketsan.livejournal.com
видимо, только у русских распространено дефолтное недоверие словам оппонента

Date: 2015-10-19 07:50 am (UTC)
From: [identity profile] edik-m.livejournal.com
в чём вообще была причина его создания
Дать людям возможность найти интересующую их беседу
А с какой целью вообще Гугл создан?

Date: 2015-10-19 07:54 am (UTC)
From: [identity profile] benderskiy.livejournal.com
гугл не создаёт и не планирует создавать поиск по блогам

я вот не представляю как объяснить иностранцу что такое поиск по блогам и зачем он вообще нужен

и сам этого не понимаю

Date: 2015-10-19 08:17 am (UTC)
From: [identity profile] edik-m.livejournal.com
Блоги, во всяком случае, русскоязычные несут массу информации, порой весьма полезной и занимательной.

Date: 2015-10-19 08:19 am (UTC)
From: [identity profile] benderskiy.livejournal.com
а дебилы из гугла этого не понимают

вот ведь как

а я в свою очередь не понимаю что вам мешает искать какую-либо информацию через обычный поиск. никто ж оттуда блоги не исключает

Date: 2015-10-19 08:28 am (UTC)
From: [identity profile] edik-m.livejournal.com
Дебилы из Гугла закрыли очень удобный и используемый RSS-reader, у них своя логика

Яндекс умел искать очень хитро, по всяким параметрам - по имени автора, по слова, за определенные даты. По коментам и постам или только по коментам, или только по постам. И можно было найти что-то нужное, помня лишь обрывок дискуссии
Обычный поиск тупо не находит многие вещи. Уже проверено

А в поиске за последние 2 месяца точно пользы никакой

Date: 2015-10-19 08:47 am (UTC)
From: [identity profile] nale.livejournal.com
Был, был у Гугла поиск по блогам. Отдельно закладка Web, отдельно новости, отдельно блоги. В какой-то момент убрали.

Date: 2015-10-19 06:59 pm (UTC)
From: [identity profile] djdance.livejournal.com
как чем
а чем блог от странички васьпупкина отличается-то

Date: 2015-10-19 07:09 pm (UTC)
From: [identity profile] karpion.livejournal.com
Наличием структуры.

Date: 2015-10-19 07:16 pm (UTC)
From: [identity profile] djdance.livejournal.com
это скорее сложность парсинга/привязки, чем индексирования
удивление про иностранцев было вызвано не этим, а *смыслом*
вот я и грю, по смыслу-то нет отличий. И там и сям инфа.

Date: 2015-10-20 04:47 pm (UTC)
From: [identity profile] karpion.livejournal.com
У блога есть структура - у каждого поста есть автор, тема, дата и много чего ещё. И эти вещи можно выделить, искать отдельно по ним - например, искать среди постов конкретного автора, не отвлекаясь на посты, в тексте которых упоминается этот автор.

А у странички васьпупкина этой структуры нет.

Date: 2015-10-20 06:50 pm (UTC)
From: [identity profile] karpion.livejournal.com
Это весьма нетривиальная задача.
Слышали ли Вы про поисковые алгоритмы, про борьбу с накрутками (когда на страницу специально помещают популярные в поиске слова), etc?

Date: 2015-10-21 04:16 pm (UTC)
From: [identity profile] karpion.livejournal.com
Учитывая, что Тор ЖЖ - вещь коммерческая, накрутки вполне ожидаемы. Не говоря уж о том, что инвестор необходим, но недостаточен - надо найти разумных программистов, а это тоже нетривиально, и деньгами не разруливается.

Date: 2015-10-19 07:48 am (UTC)
From: [identity profile] edik-m.livejournal.com
Все непросто. Например, никто не знает толком, как выкачать целиком архив жж-сообщества с коментами. Я спросил (http://useful-faq.livejournal.com/19020040.html), толком никто не ответил

Date: 2015-10-19 08:52 am (UTC)
From: [identity profile] apashenko.livejournal.com
Почему не знает-то? Вам же сказали - Teleport Pro (http://www.tenmax.com/teleport/pro/home.htm).
Edited Date: 2015-10-19 08:53 am (UTC)

Date: 2015-10-19 08:56 am (UTC)
From: [identity profile] edik-m.livejournal.com
Там все с чужих слов.
Единственный конкретный ответ гласит Телепорт вам никак не поможет, он не сохранит структуры. (http://useful-faq.livejournal.com/19020040.html?thread=235502856#t235502856)

Date: 2015-10-19 02:04 pm (UTC)
From: [identity profile] apashenko.livejournal.com
Не совсем понимаю, о какой структуре идёт речь, но Телепорт тупо по ссылкам ходит и сохраняет результаты. Получается офлайн-копия сайта.
Про свёрнутые комментарии не скажу - надо пробовать.

Date: 2015-10-19 02:07 pm (UTC)
From: [identity profile] edik-m.livejournal.com
увы, у меня телепорта нет. Поиск по инет говорит о том,что коменты остаются свернутыми
Была утилитка, их разворачивающая. Но после очередного апгрейда ЖЖ она работать перестала

Date: 2015-10-19 07:17 pm (UTC)
From: [identity profile] djdance.livejournal.com
угу, причем надо поиск по жж, вк,фб и прочим твиттерам.
в ээшечке хоть что-то можно найти
а в остальных - темный лес, даже странно

Date: 2015-10-21 07:24 am (UTC)
From: [identity profile] ergil-reborn.livejournal.com
Какую сумму вы готовы вложить в разработку? Какую сумму в месяц вы готовы выкладывать на поддержку работоспособности?

Date: 2015-10-21 01:53 pm (UTC)
From: [identity profile] ergil-reborn.livejournal.com
Нет, монетизация на посещениях не даст возможности написать системы уж точно. Ладно, предположим что мы возьмем какой-нибудь из открытых движков и будем пытаться его развивать. Эх, все равно не выходит каменный цветочек.
Давайте считать по минимуму. Нам нужно хотя бы три разработчика которые будут вести работы над движком, хотя бы три админа которые будут обеспечивать работу серверов(будем считать по минимуму $3000 в месяц на каждого, итого чисто на зарплату сотрудникам нам надо $18000 в месяц), а теперь давайте прикинем, что нам нужна стойка серверов в одном ДЦ и стойка серверов в другом ДЦ(нам же нужна устойчивость), плюс бухгалтерия и прочий ненужный нормальным людям мусор, плюс офис, ну давайте будем закладываться в $50000 ежемесячных расходов на старте, плюс сколько-то нам нужно будет здесь и сейчас вынуть и положить.
У вас есть лишние?