Выпадение страниц из выдачи Яндекс-поиска

http://m.megamozg.ru/post/18126/


Я заметил ошибку в выдаче Яндекс-поиска.
Как проверял.

Беру фразу (10-20 слов) из 100% оригинальной статьи на своем сайте. Например, написанной и опубликованной в 1998-2000г. (Яндекс позволяет использовать фразы до 40 слов).
Ввожу в поиск.
Обнаруживаю, что страницы нет в выдаче.

Я не специалист в IT. Я лишь автор контента. Могу в чем-то ошибаться. Однако в 2011 году мои сайты, мой оригинальный контент, создававшийся с 1998г. был в выдаче Яндекса на первом месте.
Страницы с копиями статей были ниже. Копий было много, десятки. Максимальное количество не выяснял, но до 70 сайтов на каждую статью, с помощью того же Яндекса, находил.
В 2012 году посещаемость сайта начала снижаться. Начал искать причину и обнаружил, что статьи просто выпали из выдачи.
70 страниц с копиями есть, а сайта источника – нет.

Возможно, комментарии специалистов помогут мне найти решение этой проблемы.

В правилах Яндекса написано, что первоисточник в выдаче должен быть выше копий. (Правила Яндекса: help.yandex.ru/webmaster/yandex-indexing/webmaster-advice.xml)
Санкции: «Исключение из поиска страниц сайта, понижение в результатах поиска…» если «Сайты… содержат не оригинальный, вторичный, малополезный контент, а также сайты, создаваемые для продажи ссылок и заработка на рекламе».

Чтобы определить «не оригинальный, вторичный» контент, Яндексу необходимо найти «оригинальный», найти первоисточник.
И раньше, в 2010-2011 году Яндекс определял источник хорошо.

Тем не менее, в выдаче, с 2012 года – копии, а не оригиналы.
Начал переписку с Яндексом.

Отправил в Яндекс:
1. Скриншот выдачи
2. Поисковую фразу
3. URL страницы, на которой есть искомая фраза.
4. Ссылку на Internet Archive, как подтверждение авторства, оригинальности и первичности контента.

Получаю, после довольно долгой переписки, сообщение.
«К сожалению, есть ошибки со стороны алгоритмов, из-за которых страницы Вашего сайта частично отсутствуют в поиске. Мы уже исправляем эти ошибки, но поскольку мы не правим выдачу по конкретным запросам или под конкретные сайты, а меняем алгоритмы в целом, чтобы подобные ошибки не возникали в будущем, это занимает достаточно много времени.
С другой стороны, нет необходимости присылать нам дополнительные примеры запросов, по которым Ваш сайт отсутствует в поиске, так как присланных ранее достаточно для выявления ошибок алгоритмов.
Пожалуйста, дождитесь окончания наших корректировок».
Это было в декабре 2013 года.

Жду. 2013, 2014, 2015 год… Количество моих оригинальных страниц в выдаче неуклонно снижается.
Сначала выпало процентов 10, на сегодня – более 60%.
Можно было бы возразить, что большими цитатами никто не ищет, но это не так. Таким образом, люди ищут: цитаты, афоризмы, стихи, песни, кинофильмы.
Кроме этого, роботу все равно какой набор слов искать (до 40 шт. по правилам Яндекса).

Важно, что в Google такой ошибки нет.

Кроме банального авторства, определение первоисточника важно не только Яндексу, но и пользователям, например, журналистам. Таким образом определение первоисточника — это качество поискового сервиса для пользователей. Это гораздо важнее, чем моя частная проблема.

Опять пишу в Яндекс (через пару лет) и получаю в ответ… «Мы действительно не определяем первоисточник».
Но как тогда определить вторичность, если не определять первичность?
Не определив первоисточник, невозможно определить, что не оригинально и вторично.

Перепроверил несколько других своих или посторонних сайтов (где помнил оригинальные публикации до 2000г.) — результат тот же. Где-то 10% оригинального контента выпало из выдачи, где-то половина и больше.
Т.е. что-то сломалось в алгоритме выдачи довольно масштабно.
Недавно написал в Яндекс опять.
Получил ответ:
«Да, мы в курсе всего этого.
Мы работаем с Вашими примерами, но не можем обещать, что ситуация кардинально изменится в ближайшее время».

И что теперь делать?

/// Пользующимся Яндексом следует иметь это ввиду.

http://m.megamozg.ru/post/18072/

Во втором квартале операционная прибыль «Яндекса» уменьшилась на 40%, а рост выручки превзошел ожидания

Во II квартале 2015 года скорректированная чистая прибыль компании «Яндекс» составила 2,8 миллиарда рублей, что на 16% меньше, чем в прошлом году. «Это вызвано разными факторами, в том числе увеличением зарплат нашим разработчикам и увеличением стоимости аренды помещений. Напомним, в мае 2014 года мы начали платить за аренду дополнительных 18 тысяч квадратных метров московского офиса, и аренда номинирована в долларах», объясняют представители «Яндекса».

Чистая прибыль до корректировки показателей сократилась на 82% — до 423 миллиона рублей. Как поясняет пресс-служба «Яндекса», 82% – это «бумажное» падение, обусловленное прежде всего изменением курсов валют: функциональной валютой для «Яндекса» является российский рубль, однако, по правилам GAAP, изменения в рублевой стоимости активов и обязательств, номинированных в других валютах, отражаются в отчете о прибылях и убытках.

Согласно квартальному отчету выручка компании по сравнению с аналогичным показателем того же периода прошлого года выросла на 14% — до 13,9 миллиарда рублей. Этот результат оказался лучше, чем прогнозировала сама компания. Представители «Яндекса» предполагали, что удастся увеличить показатель на 9-12%, аналитики «Интерфакса» предсказывали рост только на 11%.

Однако операционная прибыль «Яндекса» за отчетный период уменьшилась на 40%, до 2,2 миллиарда рублей, по сравнению с апрелем-июнем 2014 года. Скорректированный показатель EBITDA снизился на 4%, до 4,8 миллиарда рублей, говорится в сообщении компании.

«Количество наших рекламодателей увеличилось на 9% по сравнению с предыдущим кварталом и на 17% по сравнению со вторым кварталом 2014 года. Это говорит о том, что контекстная реклама продолжает быть эффективным маркетинговым инструментом для компаний любого масштаба», отметил глава «Яндекса» Аркадий Волож. По его словам, основными целями компании теперь являются повышение качества поиска и качества рекламных продуктов.

«В третьем квартале мы планируем запустить новую аукционную модель продажи рекламы, которая повысит эффективность рекламных объявлений для рекламодателей и будет способствовать росту рынка интернет-рекламы в целом», напомнил Волож.

Нерекламные доходы (статья Others) у «Яндекса» продолжают расти, но их доля в общей выручке пока мала. Нерекламными источниками доходов являются, к примеру, «Яндекс.Такси» и «Яндекс.Музыка». Общие доходы по статье Others в апреле-июне увеличились на 202% и достигли 359 миллионов рублей. В первом полугодии 2015 нерекламные доходы выросли на 183%, до 653 миллионов рублей.

Да знаю я, что у них адекватность выдачи результатов поиска стала хуже. И дизайн они за последние годы так "наусовершенствовали", что стало неудобно, особенно с почтой. Однако я бы не сказал, что Гугл для моих целей более продуктивен. Поэтому пока продолжаю пользоваться главным образом "Яндексом".

http://m.habrahabr.ru/company/yandex/blog/264699/


Яндекс добавил горячие клавиши для управления результатами поиска
5hrp вчера в 17:04 6216
С сегодняшнего дня страницей с результатами поиска Яндекса можно управлять с клавиатуры. Чтобы начать пользоваться горячими клавишами, проставьте в настройках галочку в пункте «Включить клавиатурное управление». Чтобы увидеть список команд, нажмите на клавишу с вопросительным знаком, находясь на странице с выдачей.

Клавиатурное управление требует много JS-логики, поэтому мы старались держать его минимальным и добавили только то, что нужно уметь делать на каждой странице с результатами поиска. Например, мы научили её переключаться по сочетанию клавиш на следующие 10 результатов и возвращаться к предыдущим — для этого нужно нажать Alt + → или Alt + ← соответственно. Теперь одной кнопкой можно вернуться и в строку поиска, чтобы переформулировать запрос — Esc или Tab.

Также доступен vim-режим, в котором навигация осуществляется не только стрелками, но и клавишами h, j, k, l. Если режим отключен, то при наборе текста курсор сразу попадает в поле ввода и на нём не нужно специально ставить фокус

В процессе работы мы долго думали над тем, каким цветом выделять активные элементы. Если менять только цвет тайтла, то такое изменение почти незаметно, и глазам тяжело следить за переключением. Рамки шумят визуально и скорее раздражают, чем говорят о выделении. В итоге мы выделяем весь блок акцентным цветом, который уже используем в поисковых подсказках и левой колонке.

Одной из сложностей было решение о том, как поступать в случае скролла при переходе на сниппет за пределами видимой части страницы. Было два варианта. Первый — делать доскролл к элементу при каждой смене активного элемента. Второй — при переходе на элемент вне текущего экрана скроллить его как можно дальше, чтобы в итоге общий объем скролла на экране был минимален.
Остановились на нём, так как он быстрее, легче для браузеров и приятней внешне.

Мы добавили к хоткеям возможность открывать страницу в фоновой вкладке, потому что это удобно. Но хотим предупредить, что современные браузеры запрещают несанкционированное открытие попапов, поэтому нужно разрешить Яндексу открывать их при появлении соответствующего предупреждения.

Будем рады, если в комментариях, вы поделитесь с нами своим впечатлениями о работе с горячими клавишами в результатах поиска.

http://tass.ru/sport/2187574

"Яндекс" стал спонсором турецкого футбольного клуба "Фенербахче" на сезон 2015/2016

Спорт 14 августа, 16:00 UTC+3
Финансовая сторона контракта между российской интернет-компанией и турецким клубом не разглашается


МОСКВА, 14 августа. /ТАСС/. Российская интернет-компания "Яндекс" стала спонсором турецкого футбольного клуба /ФК/ "Фенербахче" на сезон 2015/2016. Об этом сообщили ТАСС в пресс-службе компании.
Финансовая сторона контракта не разглашается.

"Футбольный клуб будет участвовать в продвижении ко-брендинговых версий Яндекс.Браузера и поискового приложения для мобильных устройств в Турции," - прокомментировали в пресс-службе.

Логотип Яндекса будет размещаться на майках команды на матчах национальной футбольной лиги. В пресс-службе также отметили, что контракт заключен на один сезон.
Это не первый спортивный контракт Яндекса. Полтора года назад Яндекс.Браузер заключил контракт с российским хоккейным клубом "Авангард".

"Фенербахче" является одним из двух наиболее популярных турецких клубов наряду с "Галатасарай". Клуб 19 раз становился чемпионом национального первенства.

"Яндекс" запустился в Турции осенью 2011 года, впервые начав работу на рынке дальнего зарубежья. Доля российского поисковика на этом рынке оценивается примерно в 5%

http://m.megamozg.ru/post/18540/


Сервис Яндекс.Такси втрое увеличил выручку в кризис и опередил Uber

14 августа в 19:04

Фото: mn.ru

Транспортный сервис Яндекс.Такси смог втрое увеличить выручку во втором квартале 2015 года. При этом сервис оставил позади своего конкурента — компанию Uber, по бизнес-показателям в России, пишет Roem. За год проект должен охватить около 25 городов, а сейчас большую часть доходов Яндекс.Такси приносит деятельность в столице.

Интересно, что только в Москве автопарк сервиса составляет более 15 тысяч автомобилей. У израильского сервиса Gett — 10 тысяч автомашин, а у американского Uber — 3 тысячи. Конкурент из США работает также в Санкт-Петербурге и Екатеринбурге. Яндекс.Такси приносит солидную часть нерекламных доходов отечественной компании.

Что касается второго квартала 2015 года, то рост выручки нерекламных сервисов компании (сюда входит и таксомоторный проект) составил 202%. Такая ситуация наблюдается уже третий квартал подряд. В первом квартале увеличение выручи составило около 163% (276 млн рублей в денежном выражении). Доля в общи доходах — 2,24%. Во втором квартале этот показатель составил 2,42%, с 635 млн рублей в денежном выражении.

Сейчас, по словам руководителя сервиса Тиграна Худавердяна, доходы онлайн-сервисов заказа такси растут даже быстрее, чем ожидалось.

http://lifehacker.ru/2016/03/28/google-alternatives/

На первый взгляд может показаться, что быть лучше Google может только
«Яндекс», да и то не факт. Эти компании вкладывают в инновации и развитие
огромные суммы. Неужели хоть у кого­то есть шанс не только соперничать с
лидерами, но и побеждать? Наш ответ: «Да!» Есть несколько поисковиков,
которым это удалось. Давайте посмотрим на наших героев.

DuckDuckGo
https://duckduckgo.com/

Что это
DuckDuckGo — это довольно известная поисковая система с открытым
исходным кодом. Серверы находятся в США. Кроме собственного робота,
поисковик использует результаты других источников: Yahoo! Search BOSS,
«Википедия», Wolfram|Alpha.
Чем лучше
DuckDuckGo позиционирует себя как поиск, обеспечивающий максимальную
приватность и конфиденциальность. Система не собирает никаких данных о
пользователе, не хранит логи (нет истории поиска), использование файлов
cookie максимально ограничено.
DuckDuckGo не собирает личную информацию пользователей и не делится ею.
Это наша политика конфиденциальности.
Гэбриел Вайнберг (Gabriel Weinberg), основатель DuckDuckGo
Зачем это вам
Все крупные поисковые системы стараются персонализировать ​ поисковую
выдачу на основе данных о человеке перед монитором. Этот феномен получил
название «пузырь фильтров»: пользователь видит только те результаты,
которые согласуются с его предпочтениями или которые система сочтёт
таковыми.
DuckDuckGo формирует объективную картину, не зависящую от вашего
прошлого поведения в Сети, и избавляет от тематической рекламы Google и
«Яндекса», основанной на ваших запросах. При помощи DuckDuckGo легко
искать информацию на иностранных языках: Google и «Яндекс» по умолчанию
отдают предпочтение русскоязычным сайтам, даже если запрос введён на
другом языке.

Нигма
http://nigma.ru/

Что это
«​ Нигма​ » — российская метапоисковая система, разработанная выпускниками
МГУ Виктором Лавренко и Владимиром Чернышовым. Осуществляет поиск по
индексам Google, Bing, «Яндекса» и другим, а также имеет собственный
поисковый алгоритм.
Чем лучше
Поиск по индексам всех крупных поисковых систем позволяет формировать
релевантную выдачу. Помимо этого, «Нигма» разбивает результаты на
несколько тематических групп (кластеров) и предлагает пользователю сузить
поле поиска, отбросив ненужные или выделив приоритетные. Благодаря
модулям «Математика» и «Химия» можно прямо в строке поиска решать
математические задачи и запрашивать результаты химических реакций.
Зачем это вам
Избавляет от необходимости искать один и тот же запрос в разных
поисковиках. Кластерная система позволяет легко манипулировать
результатами поиска. Например, «Нигма» собирает в отдельный кластер
результаты из ​ интернет­магазинов​ . Если вы не намереваетесь что­то покупать,
то просто исключите эту группу. Выбрав кластер «Англоязычные сайты», вы
получите выдачу только на английском. Модули «Математика» и «Химия»
помогут школьникам.
К сожалению, в настоящее время проект не развивается, так как разработчики
перенесли свою активность на вьетнамский рынок. Тем не менее «Нигма» пока
не только не устарела, но в некоторых вещах по­прежнему даёт фору Google.
Будем надеяться, что разработка возобновится.

not Evil
http://hss3uro2hsxfogfq.onion

Что это
not Evil — система, осуществляющая поиск по анонимной сети Tor. Для
использования нужно зайти в эту сеть, например запустив
специализированный браузер с одноимённым названием. not Evil не
единственный поисковик в своём роде. Есть ​ LOOK http://lookonion.com/ (поиск по умолчанию в
Tor­браузере, доступен из обычного интернета) или ​ TORCH (один из самых
старых поисковиков в Tor­сети) и другие. Мы остановились на not Evil из-­за
недвусмысленного намёка на сам Google (достаточно посмотреть на стартовую
страницу).
Чем лучше
Ищет там, куда Google, «Яндексу» и другим поисковикам вход закрыт в
принципе.
Зачем это вам
В сети Tor много ресурсов, которые невозможно встретить в законопослушном
интернете. И по мере того как ужесточается контроль властей над
содержанием Сети, их число будет расти. Tor — это своеобразная Сеть внутри
Сети: со своими социалками, торрент­трекерами, СМИ, торговыми
площадками, блогами, библиотеками и так далее.

YaCy
http://www.yacy.net/

YaCy — децентрализованная поисковая система, работающая по принципу
сетей P2P. Каждый компьютер, на котором установлен основной программный
модуль, сканирует интернет самостоятельно, то есть является аналогом
поискового робота. Полученные результаты собираются в общую базу, которую
используют все участники YaCy.
Чем лучше
Здесь сложно говорить, лучше это или хуже, так как YaCy — это совершенно
иной подход к организации поиска. Отсутствие единого сервера и
компании­владельца делает результаты полностью независимыми от чьих­то
предпочтений. Автономность каждого узла исключает цензуру. YaCy способен
вести поиск в глубоком вебе и неиндексируемых сетях общего пользования.
Зачем это вам
Если вы сторонник открытого ПО и свободного интернета, не подверженного
влиянию государственных органов и крупных корпораций, то YaCy это ваш
выбор. Также с его помощью можно организовать поиск внутри корпоративной
или другой автономной сети. И пусть пока в быту YaCy не слишком полезен, он
является достойной альтернативой Google с точки зрения процесса поиска.

Pipl
https://pipl.com/

Что это
Pipl — система, предназначенная для поиска информации о конкретном человеке.
Чем лучше
Авторы Pipl утверждают, что их специализированные алгоритмы ищут
эффективнее, чем «обычные» поисковики. В частности, приоритетными
источниками информации являются профили социальных сетей, комментарии,
списки участников и различные базы данных, где публикуются сведения о
людях, например базы судебных решений. Лидерство Pipl в этой области
подтверждено оценками Lifehacker.com, TechCrunch и других изданий.
Зачем это вам
Если вам нужно найти информацию о человеке, проживающем в США, то Pipl
будет намного эффективнее Google. Базы данных российских судов, видимо,
недоступны для поисковика. Поэтому с гражданами России он справляется не
так хорошо.

FindSounds
http://www.findsounds.com/

Что это
FindSounds — ещё один специализированный поисковик. Ищет различные
звуки (дом, природа, машины, люди и так далее) в открытых источниках.
Сервис не поддерживает запросы на русском языке, но есть внушительный
список русскоязычных тегов, по которым можно выполнить поиск.
Чем лучше
В выдаче только звуки и ничего лишнего. В настройках поиска можно
выставить желаемый формат и качество звучания. Все найденные звуки
доступны для скачивания. Имеется поиск звуков по образцу.
Зачем это вам
Если вам нужно быстро найти звук мушкетного выстрела, удары дятла­сосуна
или крик Гомера Симпсона, то этот сервис для вас. И это я выбрал только из
доступных русскоязычных запросов. На английском языке спектр ещё шире. А
если серьёзно, специализированный сервис предполагает
специализированную аудиторию. Но вдруг и вам пригодится?
Жизнь альтернативных поисковиков часто бывает скоротечной. О
долгосрочных перспективах подобных проектов мы спросили бывшего
генерального директора украинского филиала компании «Яндекс» ​ Сергея
Петренко​ .
«Быть лучше» в контексте этой статьи не означает «быть лучше во всём». Да,
во многих аспектах нашим героям далеко до ​ Google и «Яндекса» (даже до Bing
далековато). Но зато каждый из этих сервисов даёт пользователю нечто такое,
чего не могут предложить гиганты поисковой индустрии.

https://m.geektimes.ru/post/274394/


Очередная подлянка от Яндекс-почты
insector 15 апреля в 14:27 15,2k
Всем привет!

Читая хабр, заметил, что с Яндексом и его сервисами в последнее время происходит много нехорошего. То тут наглючат, то сервисы выпилят. Народ плюется.

Столкнулся на днях с еще одной подлянкой от Яндекса.

Есть у меня старый ящик на яндекс-почте. Ежедневно автоматически много раз в день батом проверяю там почту, что пришло — сразу забираю с удалением с сервера. Ящик почти нигде не светился.

Внезапно, на днях, бат собщает, что POP протокол заблокирован. Лезу в веб-интерфейс. Там мне сообщают, что у них есть подозрение, что мой аккаунт взломали и теперь они его заблокировали.

Для разблокировки просят денег информацию.


У них там есть форма восстановления. Хотят имя и фамилию, дату рождения, сотовый номер и в конце фото моего лица на фоне разворота моего же паспорта! Сразу захотелось спросить у них — а линейкой ничего померить не надо?

И самое интересное, что кто же помнит на какие учетные записи я этот ящик тогда регил? А форма автоматически проверяет, пишет о несовпадении и тупик. И обратной связи нет.

Насилу нашел форму обратной связи где-то в дебрях, написал им так и так. Те включили дурака, давайте мол фото, чтобы понять что вы это вы. Я им написал, что могу доказать, что я владелец. Посмотрите, писем в ящике нет, а сам при этом сообщил о датах, темах и адресатах полученных и отправленных писем с этого аккаунта аж с 2010 года. Доступ к логам только они имеют. Если злоумышленник сейчас взломал мой аккаунт, то откуда бы он узнал о таких письмах, если их нет в ящике? Даже в одном письме увидел имя и фамилию, на которые регил ящик. Все отписал. Морозятся.

Написал им, что я не нуждаюсь в их назойливой «заботе» и «защите от взлома» и попросил ее отключить, что мол сам разберусь как нибудь, без них. Под мою ответственность. Морозятся.

Могли бы просто отключать возможность отправки-получения писем, если так боятся спама и т.п. А не рубить полностью доступ к почте.

В общем, выводы:

1. Очевидно, что для работы яндекс-почты им не нужны не только мой номер телефона, но и прочие персональные данные. Я, как и многие, не желаю указывать им ничего, что могло бы меня деанонимизировать. Почта и без их нововведений успешно работала десятилениями.

2. Исходя из п.1 очень вероятно, что это развод от яндекса с целью заполучить персональные данные и с тем, в случае чего, определить конкретное физлицо.

3. Подход яндекса довольно подлый. Вот хорошо, что всю почту я забираю батом и она у меня есть локально. Ну и сервисов на этот ящик не зарегистрировано. Иначе было бы все плачевнее. Тот же твиттер, через неделю после регистрации честно предупредил, что если не введу телефон — заблокируется. Яндекс же просто молча нагадил.

4. Учитывая такие тенденции яндекса пользователям стоит задуматься. Либо они отдают всю реальную персональную информацию о себе дяде яндексу, либо подумать о сваливании с яндекса, как с неблагонадежной платформы. Чтобы потом не было с яндексом проблем. А также подумать о благонадежности ваших аккаунтов в других их сервисах.

Хотелось бы услышать в отзывах попадал ли кто еще на такую ерунду? Может у них такой механизм запущен и не спеша работает, с целью постепенно деанонимизировать пользователей? Ведь факты к подозрению на взлом я проверить не могу.


/// К слову, аналогичную фигню заметил за mail.ru. Просят номер мобильника, причем также намёками, типа ящик пытались ломать...

https://m.geektimes.ru/post/276636/


Google обошёл «Яндекс» по аудитории в Рунете

Измерялась месячная аудитория в крупных городах

Много лет Россия оставалась одной из немногих стран в мире, в которой Google не был поисковиком № 1. Но ситуация постепенно меняется. Во многом благодаря мобильной аудитории Google в последние годы улучшил свои позиции, а в апреле 2016-го впервые обогнал «Яндекс» хотя бы по одному показателю: по месячной аудитории в крупных городах, следует из статистики TNS.

В апреле 2016 года российская аудитория Google в крупных городах РФ составила 20,5 млн человек, «Яндекса» — 20,4 млн.

На третьем месте Mail.ru с аудиторией 19,3 млн.

По суточной аудитории «Яндекс» пока на первом месте в Рунете: 12,3 млн человек, на втором месте «Вконтакте» (12,1 млн), на третьем Google (11 млн).

В выборку TNS вошла аудитория 12-64 лет в городах с населением более 700 тыс. человек. В этих городах, по результатам опроса, интернетом периодически пользуется 87% населения, ежедневно — 78,2%.

По объективной статистике Liveinternet, поисковая система «Яндекс» даёт гораздо больше переходов на сайты Рунета, чем Google.

По мнению самого «Яндекса» и сторонних аналитиков, ключевой фактор роста Google в России — контроль над операционной системой Android. В связи с этим «Яндекс» предпринял активные действия: подал жалобу в Федеральную антимонопольную службу. ФАС признала Google виновной и в ближайшее время определит сумму штрафа.