Основной проблемой большинства программ по поиску дублей контента (Advego Plagiatus, и т.д.) является то, что надо копипастить конкретный фрагмент текста, и можно проверять наличие дублей только этой части текста. А зачастую бывает так, что на сайте тысячи страниц, и понять, где дубли очень сложно. Но очень грубо это можно сделать при помощи Xenu Sleuth (скачать zip).

Порядок действий:
Menu «File» — Check URL — вписываем все как на картинке
Результаты экспортируем в текст, и вставляем в экселевскую таблицу. Сортируя урлы удаляем все лишнее.
А дальше в два этапа:

1. Выделяем колонку «Size» и автоматически отмечаем все одинаковые значения цветом. Бегло пролистав список можно будет легко найти страницы одинакового размера, они скорее всего будут являться дублями
2. Выделяем колонку «Title» и делаем то же самое

Подкрашивание одинаковых ячеек в Excel начиная с 2007.
Выделяем все ячейки с данными и на вкладке Главная (Home) жмем кнопку Условное форматирование (Conditional Formatting), затем выбираем Правила выделения ячеек — Повторяющиеся значения (Highlight Cell Rules — Duplicate Values).

Второй вариант — учитывать ссылки только из сайтов в Яндекс.Каталоге (ЯК) без ограничений по тИЦ, ведь такие сайты как минимум проверены модераторами.

Логично, что есть и третий вариант — как комбинация указанных подходов. Если сайт не в ЯК, то тогда критерий тИЦ от 100, плюс все сайты из ЯК, где лучше состоять даже своим живым дневничком. Учитывая то, что и для ГС, и для СДЛ могут в любой момент обнулить тИЦ за продажу ссылок, то ссылочное продвижение по информационным запросам будет урезано до данных вариантов, а в коммерческую выдачу по Москве его в каком-то виде тихо вернут.

Асессор Яндекса — это эксперт, оценивающий релевантность документов в результатах поиска, которые нашла поисковая система по случайным запросам. Асессор делает оценку, опираясь на описанные правила и свой здравый смысл.

Общие правила

Базовой единицей оценки является оценка рел+. Релевантный ответ предоставляет решение пользовательской задачи (бывают запросы, для которых задача, по сути, одна, а бывают запросы, для которых существует спектр задач или которым соответствует несколько объектов поиска).

Если страница позволяет решить сразу несколько задач (для запросов с несколькими потребностями), информации гораздо больше, чем на среднего уровня релевантной странице, она лучше структурирована, — такой странице стоит поставить оценку полезный.
Когда наоборот, страница не полностью решает задачу, слишком сужает её или наоборот, расширяет, если страница посвящена малозначительному объекту — тогда оценка должна быть ниже, это рел- ответ.

Витальный ответ — это официальный ответ на вопрос, он несколько отличается от прочей шкалы. Для многих запросов витального ответа не может существовать в принципе, потому что нет официального владельца информации по теме. Обычно определить витальный довольно просто, но иногда бывают и более запутанные случаи.

Также в шкале присутствуют две близких по смыслу оценки нерел и не про то. Нерелевантный — это документ, который в целом соответствует теме запроса, но на него не отвечает. Не про то — это оценка для случаев, когда документ не просто не отвечает на запрос, но вообще относится к совершенно другой тематике.

Помимо релевантности есть ещё оценка спама. Для документов, где присутствуют признаки спама, надо поставить оценку «спам», остальные — «не спам».

Документам с оценкой рел+ и полезный также надо ставить срок устаревания (чаще всего — никогда, но некоторые документы релевантны запросу в момент оценки, а со временем теряют релевантность).

Философия оценки

Во время выполнения заданий у вас могут возникнуть разные вопросы по работе, например: в какой части инструкции искать правила к моему запросу? Как понять, где граница между релевантным и нерелевантным ответом? Может ли тут быть витальный ответ? Что делать, если задание в корне противоречит здравому смыслу? Как не скатиться в формализм и не забыть про здравый смысл? Как не потерять веру в человечество после всего этого?
В первую очередь важно понимать, что автоматизировать систему оценки невозможно, требуются именно человеческие оценки, а не ответ от робота. С другой стороны, оценки разных людей (экспертов) должны быть согласованы и проставлены по единой схеме, иначе вместо оценки получится сомнительного качества опрос общественного мнения.

Чтобы экспертные оценки обладали достаточным качеством, была разработана инструкция асессоров, которая постоянно обновляется и улучшается. Предусмотреть все возможные комбинации запрос-ответ невозможно, но самые распространённые варианты в ней описаны. Если ваш случай однозначно попадает в описание из инструкции, надо оценивать страницы из задания согласно этому описанию. Если же прямого ответа на свой вопрос в инструкции вы не нашли, нужно ориентироваться на здравый смысл.

Часто запросы бывают однозначные сами по себе, например [бесплатные новые игры винкс ТОЛЬКО БРОДИЛКИ винкс только про винкс и больше не чего только бродилки]. Логично предположить, что если ответ не содержит игр-бродилок про Winx, релевантность у него нулевая, так что формальный подход к запросам такого рода вполне уместен. Или [как раки относятся к своей прошлой любви?]: тут тоже подойдут только страницы, на которых рассматривается отношение людей, родившихся под знаком Рака, к своим бывшим вторым половинкам. Прочие знаки зодиака и иные психологические особенности Раков совершенно точно не соответствуют запросу. Предположение о том, что речь идёт о членистоногих животных, хотя и забавно, но лишено разумных оснований. Многие запросы сформулированы более общо и им соответствуют несколько типов ответов, например [мангалы из кирпича своими руками]. К такому запросу подойдут тексты (желательно с картинками) с описанием процесса или видеоуроки.

Определить, какая именно информация больше нужна помогает не только здравый смысл, но и статистика. Например, логично предположить, что если что-то можно скачать бесплатно, то предложение покупки этого объекта гораздо менее интересно людям, и статистика это подтверждает. Самые типичные запросы с несколькими разными релевантными ответами это запросы, которые состоят только из названия песни или фильма, имени известного человека или коллектива. Также иногда попадаются запросы, для которых существует несколько подходящих объектов. Без статистики определить, какие именно объекты релевантны, может быть довольно затруднительно. В таких случаях стоит ориентироваться на аннотацию.
Чтобы понять, может ли у запроса вообще быть витальный ответ, надо ответить на два вопроса: является ли запрос навигационным (то есть пользователю, скорее всего, нужна единственная страница), например [вконтакте], [скачать песню кино перемен с зайцев нет]? Если запрос навигационный, то та самая главная искомая страница будет витальной. Если нет, то важно понимать, есть и объекта поиска официальный источник или правообладатель? Если объект поиска — товар, объект авторского права (песня, книга, фильм, программа,..), закон или у объекта поиска существует официальный сайт, то витальный ответ в принципе возможен. Во всех прочих случаях витального ответа не бывает. Например, для запроса [погода в томске сегодня] не может быть витального, поскольку не существует производителя или правообладателя погоды. С другой стороны, для запроса [погода в томске сегодня гисметео] витальный существует, потому что это навигационный запрос, пользователя интересует не просто информация о погоде, но информация на определённом ресурсе.

Определить, какой ответ релевантный, а какой — нет, в общем случае несложно. Но иногда возникают непредвиденные ситуации. Предугадать всё заранее невозможно, поэтому если вы столкнулись с ситуацией, для которой нет явного правила, постарайтесь найти разумную аналогию из инструкции. Если и этого не получается, надо действовать исходя из здравого смысла. Важно удержать баланс между формальным подходом и субъективным мнением по ситуации. Иногда это не получается, но расстраиваться по этому поводу не стоит: работать со стопроцентной точностью невозможно, какие-то ошибки будут всегда.

Иногда непредвиденные сложности возникают в простых, казалось бы, ситуациях. Например, легко представить себе, какие картинки релевантны запросу [фото белой собаки], а какие — нет. Если на фотографии изображена белая собака — фото релевантно, а если, скажем, чёрная собака или белая кошка — то точно нет. Что делать, если собак несколько, а белая только одна? Ну это вроде несложно, релевантность ниже, чем в первом случае, но не ноль всё-таки, белая собака же есть. А что делать, если у собаки маленькое чёрное пятнышко на лапе? Она формально не совсем белая, но так ли это важно? А что делать, если она какая-то светлая, но не особо понятно, это всё ещё белая или это уже другой цвет? Крайние точки тут несложно обозначить: если собака — далматин, она уже не белая, а вполне пятнистая. Но одно маленькое пятно, например, не достаточно «портит» белую собаку. Но где провести границу? Считать площадь не белого? Может, учитывать местоположение пятен (например, пятно на лапе не важно, а на голове — важно) или их количество, а не площадь? В какой момент светлая шерсть перестаёт называться белой? Внимательный читатель уже наверняка понял, что все эти вопросы — верный путь себя запутать и поставить вообще бог знает что вместо адекватной оценки. В таких случаях надо полагаться на здравый смысл, а формализм только навредит.

В целом, стоит помнить, что правила в инструкции создавались на основе здравого смысла и известной статистики, причём в них описывается максимально общий подход, то есть правила написаны таким образом, чтобы составленная на их основании выдача поисковой системы удовлетворила потребности максимально возможного числа людей. Угодить совсем уж всем и сразу кажется невозможным, но мы очень стараемся подобраться к этому идеалу.
Поэтому оценивайте страницы, исходя из инструкции, но не доводите следование ей до абсурда.

Полностью тут: marketingpeople.ru/documents/25823/100

Я думаю что они полностью не отменят ссылочное ранжирование, но могут полностью перестать учитывать ссылки с автоматических бирж. Посмотрим, что будет через месяц

Сделал картинку для страницы о тарифах и ценах на SEO в alsd.ru
Обыграл букву «С» как «$» вроде прикольно получилось. Или херня?

На сегодняшний день ни Google ни Яндекс, не научились распознавать блоги в автоматическом режиме. Если Вы ведете блог на стандартной площадке, например ЖЖ или Лиру и т.д., то блог попадает в поиск по блогам Яндекса и Google автоматически. Если же Вы создали и активно ведете блог на wordpress или другом движке, то уже не факт, что блог автоматически попадет в поиск по блогам.

Для решения этой проблемы необходимо зарегистрировать блог для:

• Яндекса
• Гугла

Забавные первые 2 результата выдачи в Яндексе по запросу «Можно ли самому сделать сайт»

Яндекс выдает:

1. Можно ли сделать себе самому минет??? — есть ответ — Вопросы и ответы
   А как вы считаете стоит ли мне ей признаться? Как бы вы отреагировали на такое от своего любимого? … Странная тема какая-то, ладно бы спросил можно ли самому сделать сайт, а такое…
   otvety.google.ru›otvety/thread…


2. Можно ли сделать самому крышку для аквариума — есть ответ — Вопросы…
   должно ли искуственное освещение аквариума гореть весь день? … Используйте Вопросы и ответы на своем телефоне. Посетите сайт otvety.google.ru в браузере телефона.
   otvety.google.ru›otvety/thread… копия ещё

В общем т.к. и мне самому в хрен знает какой раз он понадобился, а в интертене я быстро не нашел, решил сделать сам и выложить чтобы не терять, так быстрее и проще.
Кому нужен лого «Яндекса — Херня» — мне не жалко — берите Если поставите на меня где-то ссылочку — вообще гуд
Немного мыльный, пришлось увеличивать из маленького. Но обычно большой и не нужен.

Биржы ссылок и статей:
sape.ru — биржа ссылок
articles.sape.ru — биржа статей.
pr.sape…
gogetlinks.net — биржа вечных статей и ссылок.
blogun.ru — биржа вечных статей и ссылок в блогах (удобно для размещения разбавочных ссылок).

Биржы поведенческих факторов:
movebo.ru — (!) только живые пользователи.
serpclick.ru — только живые пользователи.
userator.ru — с возможностью накрутки «роботами».

Медийка:
pay-click.ru — одна из самых выгодных тизерных сетей, хороший ЦТР.

Потом еще список весь сделаю, и свои отзывы напишу..

Немного почищенной копипасты из ЖЖ Юзератор:
Существует простой до банальности метод Поведенческого анализа, с помощью которого можно увидеть влияние факторов на выдачу.
Например, смотрим выдачу по запросу с ключевым словом «авиабилеты»:

Просмотр и определение поведенческих факторов данным способом так же выявляет наличие фильтров у некоторых сайтов.

Бонус, вторая часть видео, ответы на вопросы: