Вопрос об индексации сайтов поисковиками

[astronom1987]

Форумчане, может кто объяснит мне почему сайты индексируются поисковой системой так как это происходит сейчас, а не так как это будет значительно проще? В чем вопрос? Вопрос в том, что для того, чтобы совершенно новый сайт был увиден и проиндексирован поисковыми роботами нужно несколько недель, а часто и больше. А почему бы не сделать так, чтобы молодой сайт бы устроен таким образом, чтобы после своего появления он сам автоматически связался например с Google и всеми популярными поисковиками и сам себя занес в их реестр по своим ключевым словам.

[Bizdelnick]

Потому что поисковики устали бороться с сеошниками, а дать им такой инструмент — всё равно что ядерную бомбу воинственному дикарю.

[astronom1987]

А вот это интересно. Как-то я спросил у своего знакомого: почему в школах не преподают такую науку как логика? А преподают ее преимущественно в высших учебных заведениях и то часто будущим детективам. На что он ответил, что если преподавать логику в школе, то
преступники станут гораздо более опытными и их более сложно станет обнаружить и наказать. Тогда встречный вопрос: зачем тогда давать возможность пользоваться автомобилем если на нем можно скрыться от работников право-хранительных органов или сбить человека или почему не запретить алкоголь веди в отличии от логики если бы ее преподавали в школе он точно приносит несравненно больше вреда чем пользы. Т. е. вместо того, чтобы придумать способ как бороться с черными сайтами проще вообще сделать так, чтобы поисковики видели за сайты за месяц, а то и больше времени?

[devilr]

Так предложите способ борьбы с "черными сайтами". Робот, который равномерно и неторопливо обходит все сайты, хорошие или плохие, просто ставит их в равные условия. А искусственное ограничение, как мне кажется, просто приведёт у новым алгоритмам СЕО, не более того.
Впрочем, может я и ошибаюсь...

[astronom1987]

Тут ситуация такая, что месяц надо скажем для обнаружения нормального сайта и месяц для черного. Если не существует алгоритмов отбора для робота и оба сайта попадут в поиск на одинаковых условиях, то почему тогда спрашивается усложнять жизнь творческим людям, которые создали нормальный сайт? Черный сайт ведь все равно попадет в реестр рано или поздно, но все равно попадет. Неужели сайтов создается настолько много, что выявить аномальный сайт трудно, а вот нарушения авторского права на youtube легко? Мне кажется что тут явно что-то другое скрывается.

[devilr]

А что есть " нормальный сайт"? Можете пример критериев привести, согласно которому можно будет сделать "нормальный сайт" и нельзя будет сделать тот же "дорвей" по этим же критериям?

[azsx]

как бывший сеошник не пониммаю вопроса.
1. Найден по ссылке -- можно в часы в серп попасть.
2. Робот индексатор на самом деле от обеих нужных Вам ПС приходит очень быстро. Какие недели???

[astronom1987]

Черный сайт - это когда в нем находятся просто самые популярные ключевые слова для поиска, но никакой пользы. Например: "скачать драйвер для nvidia" где вместо ссылки на драйвер есть текст с кучей таких слов скажем на скачивание других драйверов также без ссылок. Вам возможно будет интересно, но Яндекс имеет сервис Яндекс.Толока где каждый желающий заработать помогает поисковику совершенствовать поисковую выдачу. Но ни Google ни другие поисковики к сожалению такого не имеют.

Добавлено (15:29):

Как автор блога я интересовался почему поисковики не видят новый сайт. Где получил ответ я узнал, что в это происходит потому, что происходит через 3-4 недели. Если Сами не можете найти - ссылки могу дать где такое написано. Вот я сменил доменное имя для своего сайта и количество уникальных посетителей упало от в среднем 130 людей до 1 в сутки.

[azsx]

зашёл на лор, ткнул в general (самый вверх), взял первую увиденую тему (в 12:49).

Яндекс имеет сервис Яндекс.Толока где каждый желающий заработать помогает поисковику совершенствовать поисковую выдачу.

Одна из многих причин, почему информационный поиск в яндекс убит совсем.
зы
про смену имени -- 301 редирект настроен на все страницы корректно? https заодно не влупили на новом домене?

[devilr]

Черный сайт - это когда в нем находятся просто самые популярные ключевые слова для поиска, но никакой пользы. Например: "скачать драйвер для nvidia" где вместо ссылки на драйвер есть текст с кучей таких слов скажем на скачивание других драйверов также без ссылок. Вам возможно будет интересно, но Яндекс имеет сервис Яндекс.Толока где каждый желающий заработать помогает поисковику совершенствовать поисковую выдачу. Но ни Google ни другие поисковики к сожалению такого не имеют.

Добавлено (29.03.2019 15:29):

Как автор блога я интересовался почему поисковики не видят новый сайт. Где получил ответ я узнал, что в это происходит потому, что происходит через 3-4 недели. Если Сами не можете найти - ссылки могу дать где такое написано. Вот я сменил доменное имя для своего сайта и количество уникальных посетителей упало от в среднем 130 людей до 1 в сутки.

Тут проблема в том, что "польза" - вещь сугубо субъективная. Для чёрного СЕО его мусорный сайт для него гораздо более "полезный", чем тот, который приносит пользу для других, но не приносит копеечку в его карман.

[Bizdelnick]

месяц надо скажем для обнаружения нормального сайта

Ну не ждите, пока робот сам его обнаружит, расскажите ему. Но никаких ключевых слов задать, конечно, никто не позволит, и в топ выдачи не засунет.
P. S. Также см. википедия://sitemaps.

[astronom1987]

Спасибо за ссылку, отличная возможность, но хотелось бы все-таки, чтобы была возможность автоматизировать этот процесс.

[Bizdelnick]

Спасибо за ссылку, отличная возможность, но хотелось бы все-таки, чтобы была возможность автоматизировать этот процесс.

Там написано, как автоматизировать.

[astronom1987]

Смотрел по-диагонали, будет больше времени - изучу подробнее.

[UriyZenkov]

Для начала нужно добавить сайт в аддурилки поисковых систем.
На главную добавить ссылку на карту сайта, чтобы все страницы как можно быстрее проиндексировались.
Прогнать сайт по пинг-сервисам.
http://pingxpert.com/

Рабочий список пинг-сервисов:

http://trackback.bakeinu.jp/bakeping.php
http://bulkfeeds.net/rpc
https://ping.blo.gs/
http://ping.weblogalot.com/rpc.php
http://blogpeople.net/servlet/weblogUpdates
http://rpc.reader.livedoor.com/ping
http://coreblog.org/ping/
http://ping.bloggers.jp/rpc/
http://blogoon.net/ping
http://blogsnow.com/ping
http://pingoat.com/goat/RPC2
http://mod-pubsub.org/ping.php
http://imblogs.net/ping
http://weblogalot.com/ping
http://rpc.twingly.com
http://www.blogdigger.com/RPC2
http://www.blogsnow.com/ping
http://ping.feedburner.com
http://ping.weblogalot.com/rpc.php
http://www.feedsubmitter.com
http://www.pingmyblog.com
http://pingoat.com/goat/RPC2
http://blogpeople.net/ping
http://ping.fc2.com/
http://www.xmlrpc.bloggernetz.de/RPC2
http://ping.bitacoras.com
http://blog.goo.ne.jp/XMLRPC
http://blogpeople.net/servlet/weblogUpdates
http://services.newsgator.com/ngws/xmlrpcping.aspx
http://rpc.bloggerei.de/ping/
http://www.blogpeople.net/servlet/weblogUpdates
http://ping.bloggers.jp/rpc/
http://mod-pubsub.org/kn_apps/blogchatter/ping.php
http://mod-pubsub.org/ping.php
http://godesigngroup.com/blog/feed/
http://www.mod-pubsub.org/kn_apps/blogchatter/ping.php
http://mod-pubsub.org/kn_apps/blogchatt
http://bitacoras.net/ping
http://blogdigger.com/RPC2
http://blogoon.net/ping
http://blogsnow.com/ping
http://imblogs.net/ping
http://mod-pubsub.org
http://mod-pubsub.org/knapps/blogchatt
http://ping.blogg.de
http://rpc.reader.livedoor.com/ping
http://www.blogoon.net/ping
http://www.imblogs.net/ping
http://www.mod-pubsub.org/ping.php
http://xmlrpc.blogg.de
http://coreblog.org/ping/
http://www.blogoon.net/ping/
http://rpc.twingly.com
http://www.blogdigger.com/RPC2
http://www.blogsnow.com/ping
http://ping.feedburner.com
http://ping.weblogalot.com/rpc.php
http://www.feedsubmitter.com
http://www.pingmyblog.com
http://www.weblogalot.com/ping
http://services.newsgator.com/ngws/xmlrpcping.aspx

Добавить на другие сайты ссылки на свой сайт.
Роботы постоянно сидят на популярных сайтах и быстро найдут вашу ссылку. По этой причине твиттер пользуется популярностью у чёрных сеошников. На маулталке можно заказать прогон по твиттеру.

Добавлено (18:08):

Еще для ускорения индексации немаловажно правильно настроить перелинковку страниц на сайте. У меня после добавления блока ссылок "похожие новости" посещаемость выросла с 30 до 80 человек в сутки.