По поводу мошенников

[Comm]

что есть там ссылкой, какие тексты, это ссылка ЛФ?

Ссылкой должна быть эта (ключевики вверху)

Здесь гостиница жемчужина сочи контакты - хороший санаторий!

LF или нет, не знаю, но понятно, что куплена....

если это то, что я выше привел, ссылки выдаются через конструкцию <ul><li> (это можно увидеть даже в оригинале исходника страницы), т.е. это даже не зависит кому страница отдается, то вероятно нужно внести кое-какие правки при проверке ссылок на валидность, иначе выдавать error;
просто приведите подробный пример в ОС, можно со ссылкой на эту ветку форума, проблему передадут программистам, а они в свою очередь подумают можно ли это решить и как (если нет более приоритетных задач)

<ul><li> элементы маркированного списка или чего то типа того...., но никак не ссылки.....
Что же бот уже не умеет вид прямой ссылки определять??

[Emperor]

Comm, видимо не все так просто (возможно ВМ проводит дополнительные манипуляции с такими тэгами) или где-то закрался баг, думаю нужно четко сформулировать вопрос в ОС и показать конкретный пример, со ссылкой на эту тему, ведь проще внести в алгоритм незначительные правки и выдавать при виде таких ссылок ЕРРОР, нежели вылавливать сотни, а может даже и тысячи таких сайтов

[Comm]

Возможно что и намудрёно, типа ботам LF, заходящих с известных IP, подсовывают типа нормальную ссылку, а остальным улли....
Но чё то это ближе к фантастике.... и сомневаюсь чтобы ВМ стоило так мудрить, да к тому же на таких с позволения сказать сайтах.....

[Emperor]

как вариант, ВМ мог выдавать ссылки именно в такой конструкции, как мы видим в исходнике (даже без кэша), т.е. <ul><li> , а для ботов бирж выдавать подмененный код, каким-то образом подменяющий регулярные выражения, например, при ручной модерации, или же пользуясь определенными недоработками кода бирж

Возможно что и намудрёно, типа ботам LF, заходящих с известных IP, подсовывают типа нормальную ссылку, а остальным улли....
Но чё то это ближе к фантастике.... и сомневаюсь чтобы ВМ стоило так мудрить, да к тому же на таких с позволения сказать сайтах.....

так похоже и есть, захожу на страницу и вижу только <UL><LI> в оригинале, как и в кэше, а что видит робот биржи - загадка, которая вскоре может быть разгадана программистами
учитывая то, сколько таких однотипных сайтов уже найдено, то можно предположить, что это все-таки выгодно

p.s. я прошелся по некоторым другим сайтам из списка, но так и не понял где там нарушения, ссылки присутствуют в кэше и в оригинале...

[el_spal]

Emperor, давайте чистеньких я их удалю из списка. Или же напротив покажу нарушение.

[Emperor]

любой приводи, вот например взял последний из первого списка, в блоке "Наши партнеры" три ссылки, в кэше Яндекса эти ссылки также присутствуют

[el_spal]

Может это ссылки другой биржи?
Я этот сайт помню вручную проверял. Показывал ОК, при отсутствии ссылки. А раз статус ок, а ссылки нет, значит деньги уходят.

Вообще лучше примеры из сайтов которых нет в первом списке. Их я уже в гбл отправил, и моих ссылок там нет (чтобы я мог убедиться что статус ок, и вообще знал какой текст искать)

Раз уж я не подтвердил свои слова, то вот например два урла которых нет в первом списке.

Вот например
tacklesite.ru/page/3/
ch4.su/zakonodatelstvo-rf/24-zakon-g-moskvy-ot-07072004-n-45-ob-innovatsionnoj-dejatelnosti-v-gorode-moskve.html

Они не отдают боту яндекса ссылки

[Comm]

.....Вот например
tacklesite.ru/page/3/.....

Этот пример воще зачёт....
Титл страницы

Распоряжение мэра Санкт-Петербурга

Анкор "типа купленной" ссылки

Самые красивые девушки года. Голые девушки....

Хорошенькое распоряженьице.....

По теме, да, только текст, причём и он скрытый.....

[el_spal]

А чтобы увидеть мошенничество на второй, надо зайти подставив юзерагент Yandex/1.01.001

[Emperor]

кстати, очень плохие площадки выбираешь для покупки, с них ничего не взять (в Google нет, тИЦа нет, имеют много страниц, полупустые непосещаемые сайты и т.п.), пусть даже и задешево

tacklesite.ru/page/3/
ch4.su/zakonodatelstvo-rf/24-zakon-g-moskvy-ot-07072004-n-45-ob-innovatsionnoj-dejatelnosti-v-gorode-moskve.html
Они не отдают боту яндекса ссылки

я эту страницу вообще не вижу ни в кэше Гугла, ни в кэше Яндекса;
и да, какая именно там ссылка? кроме попап-рекламы Google ничего не вижу