Одна із найбільш поширених помилок веб-майстрів та оптимізаторів є те, що вони не використовують robots.txt, META-роботс та атрибут nofollow. Всі вищевказані фактори впливають на індексацію, та ріст PageRank, а також це все впливає на ранжування сайту у видачі та ваш інтернет бізнес зокрема. Трохи поговоримо про вплив robots.txt, META-тегів і nofollow на SEO і як потрібно використовувати їх для покращення рейтингу вашого сайту. далі…
Перш ніж зрозуміти, як зберегти тІЦ при переході на новий домен, визначимося з визначенням: дзеркалами одного і того ж сайту пошукові системи вважають сайти, контенти яких повнітю ідентичні. При цьому виявивши дзеркала, Яндекс не відмовляється індексувати обидва сайти, просто склеює їх – після цього всі відвідувачі автоматично перенаправляються на «головне дзеркало» – основний сайт. А визначення значимості дзеркал йде тільки виходячи з того, який із сайтів «заморожений», а який продовжує наповнюватися контентом. При цьому ТІЦ обох сайтів-дзеркал підсумовується.
Що це означає? Що тепер ви сміливо можете міняти доменне ім’я свого сайту і переїжджати на інший хостинг, не тільки не втративши жодного посилання, які у вас були, а значить – повністю зберігши свій ТІЦ. При цьому просуваючи новий сайт, ви можете розраховувати на те, що всі нові посилання будуть піднімати індекс цитування, тому що будуть підсумовуватися із старими.
І так, для того, щоб зберегти ТІЦ сайту з новим доменним ім’ям, потрібно обов’язково зберегти старий сайт на старому домені. І зробити це потрібно хоча б пам’ятаючи про те, що як тільки ви видалите його, всі посилання, що вели на нього будуть анульовані і вам доведеться просувати і розкручувати свій новий сайт буквально з нуля.
Залишивши ж дзеркало, ви можете нічого не робити, повністю довірившись пошуковим роботам Яндекса, знаючи, що вони і самі все зроблять правильно. Однак склеювання може зайняти не один місяць. Але процес можна прискорити, такими діями:
- Скопіювати весь контент зі старого сайту на новий, щоб вони стали дзеркалами.
- Змінити robots.txt у всіх сайтах-дзеркалах, розмістивши в ньому директиву Host із зазначенням головного сайту, на який і буде відбуватися перенаправлення.
- Дочекатися переіндексації сайтів роботами Яндекса.
- Перевірити ТІЦ нового сайту, який повинен бути ідентичний ТІЦ старого.
При заповненні директиви Host, Яндекс рекомендує зробити наступний запис в robots.txt обох сайтів.
User-Agent: *
Disallow: / cgi-bin
Host: www.sait-zerkalo.com
де www.sait-zerkalo.ru – ваше головне дзеркало.
Додаткові написи із зазначенням другорядних сайтів робити не потрібно, тому що в директиві Host роботи читають лише перший запис. А так само ігноруються записи Host із значками, які не можуть перебувати в правильно прописаних URL – зайві точки, косі, нижнє підкреслювання, запис «http://» або вказівка відразу декількох доменів в одному рядку.
Саме це і допоможе вам зберегти ТІЦ вашого сайту при переїзді на новий домен. А от якщо ви задумали переїжджати на новий домен, то можливо Вам буде цікаві ціни на послуги colocation (розміщення сервера)
Про клей потрібно знати всім, тому що є “умільці”, які за допомогою дзеркал дурять чесний народ. Продають домени чи сайти дзеркала, де тІЦ нарощений таким чином. Або продають посилання із таких сайтів. На це потрібно звертати увагу.
Панель Яндекс.Бар допомагає власникам сайтів слідкувати за їхнім станом.
Кнопка “Яндекс.Вебмастер”, яка дозволяє переходити на сторінки вибраного сайту із цього сервісу в один клік мишки.Також кнопка дає можливість перегляду всього списку Ваших сайтів, зразу переходити на сторінку аналізу файла robots.txt, додавання нового сайту, а тако на стрінку порівняння результатів видачі у різних регіонах.
“Яндекс.Вебмастер” допомагає слідкувати за безпечністю Ваших сайтів, що завжди є важливо. Якщо на сайті з’явиться вірусний код, то іконка сайту змінюється, а у випадаючому меню напроти цього сайту Ви побачите спеціальний значок.
Ще одна корисна кнопка “Сайт”, яка відображає всю інформацію про Вас сайт: тІЦ, кількість проіндексованих сторінок. Ця кнопка також попереджає Вас про зараження сайту вірусом.
Розмістивши декілька кнопок “Сайт”, Ви зможете прослідковувати всі Ваші сайти.
Всім веб-майстрам. які працюють вбільшості з пошуковою системою Яндекс раджу використовувати панель Я.Бар.
Склеювання проводиться по 2 основних пошукових системах: Яндекс і Google.
Для кожної з них використовується інший метод.
Склеювання для Яндекс:
Допустимо потрібно склеїти 2 домена site1.com i site2.com. Їх потрібно склеїти в site2.com.
Для цього у файлі robots.txt прописуємо:
User-agent: Yandex
Disallow:
Host: site2.com
site1.com – домен, який потрібно приклеїти.
Зверніть увагу, що домен із www і без, для пошукових систем – два різні URL.
Після цього очікуємо АПдейту дзеркальщика (він проходить рідко). Якщо по запиту http://yandex.ua/yandsearch?tld=ua&serverurl=site2.com будуть виводитися посилання на site1.com то це буде означати, що домени склеїлися. Якщі ні, то потрібно буде почекати наступного АПу.
Склеювання для Google:
Дано ті ж самі 2 домени site1.com i site2.com, які потрібно склеїти в site2.com.
В гуглі все набагато простіше. Тут потрібно просто поставити 301 редірект і дочекатися переіндексації.
Щоб створити 301 редірект потрібно у файлі .htaccess прописати:
RewriteEngine on
RewriteCond %{HTTP_HOST} ^site1\.com
RewriteRule ^(.*)$ http://site2.com/$1 [R=301,L]
RewriteCond %{HTTP_HOST} ^www.site1\.com
RewriteRule ^(.*)$ http://site2.com/$1 [R=301,L]
Після чього просто чекаємо переіндексації і зміну URL у видачі.
Бувають випадки, що при склеюванні доменів у двох пошукових системах одночасно спостерігається втрата трафіку з гуглу.
Щоб цього уникнкти робимо наступне.
Склеювання доменів в Яндекс + Google ондочасно
Задача така чама, як і в поперелніх випадках. Домени site1.com i site2.com потрібно склеїти в site2.com.
Для початку проведемо склеювання в Яндексі, тому, що якщо почати з гуглу, то Яндекс може помітити це як помилки і неврахувати посилання насайт.
Для цього потрібно 2 різні файла robots.txt для кожного домену.
Для сайту site1.com прописуємо:
User-agent: Yandex
Disallow:
Host: site2.ruUser-agent: *
Disallow:
Sitemap: http://site2.ru/sitemap.xml
Для другого прописуємо теж саме, тільки забороняємо його індексацію гуглом, для того щоб не було зайвих дублів.
Для сайту site2.com прописуємо:
User-agent: Yandex
Disallow:
Host: site2.ru
User-agent: *
Disallow: /
Sitemap: http://site2.ru/sitemap.xml
Все, чекаємо АПу дзеркальщика. І як тільки по запиту http://yandex.ua/yandsearch?tld=ua&serverurl=site2.ru будуть виводитися посилання на site1.ru робимо 301 редірект:
RewriteEngine on
RewriteCond %{HTTP_HOST} ^site1\.com
RewriteRule ^(.*)$ http://site2.com/$1 [R=301,L]
RewriteCond %{HTTP_HOST} ^www.site1\.com
RewriteRule ^(.*)$ http://site2.com/$1 [R=301,L]
і ставимо єдиний robots.txt:
User-agent: Yandex
Disallow:
Host: site.ruUser-agent: *
Disallow:
Sitemap: http://site.ru/sitemap.xml
Склейка в любому випадку знизить пошуковий трафік. До цього потрібно бути готовим.
Продовженя статті Оптимізовуємо блог на WordPress (частина 1).
1. Боротьба з кражею контента.
Як би Ви не стараляли створити унікальний контент, нічого уВас не получиться. А діло в тому, що WordPress сам генерує дубльований контент, тому що одна і та ж стаття доступна по різним URL в межах одного блога. Кількість дублів кожної статті зазвичай рівне 5. Це розбиття статей по категоріях, даті, тегах, по авторах, і по сторінках. Проблема зрозуміла, але як з нею боротися? – Для початку скачаємо і встановлюємо плагін Meta Robots WordPress plugin, і налаштовуємо його так: ставимо галочкі коло:
- this site’s search result pages
- the login and register pages
- all admin pages
- subpages of the homepage
- author archives
- data-based archives
- category archives
- tag archives
Або це все можна вручно налаштувати в файлі robots.txt.
2. Прискорення індексації блога.
Потрібно організувати правильну внутрішню перелінковку. Потрібно щоб пошуковий бот як найшвидше потрапив на сторінку, яка ще не проіндексована.
2.1 Видалення непотрібних архівів
Для початку видалемо непотрібно посилання із теми блога. Якщо у блога немає великою кількості постів, то йому не обовязковов вести архів по датах.
2.2 Пагінація
Качаємо і встановлюємо плагін WP-PageNavi.
2.3 Останні записи
Окрім WP-PageNavi потрібно використовувати WordPress Related Posts.
3. Публікацію у вигляді сторінок.
Для оптимізації під опреділені ключові слова краще опубліковувати не у вигляді новин, а у вигляді нових сторінок. Це дає два великих плючи. Можна організувати багаторівневу структуру, завдяки “підсторінкам”. І відсутність коментарів дасть фіксовану щільність ключових слів.
XML SiteMap, як і robots.txt, необхідна річ на любому сайті. В чому ж заключається робота SiteMap? Він сповіщає пошуковому боту сторінки сайту для сканування, адреси URL всіх сторінок на Вашому сайті, дату і частоту останньої зміни. В загальному даний файл являється таким собі «помічником» для пошукового робота, який помагає йому знайти файли і сторінки Вашого сайту, тим самим зменште час індексації Ваших сторінок.
Існує два види SiteMap: для відвідувачів (HTML) і для пошукових роботів (XML). В статті розглянемо SiteMap для пошукових роботів.
Якщо ж цей SiteMap потрібен для кожного сайту, де ж його взяти або як його створити? Як приклад, для WordPress існує спеціальний пагін, який називається Google XML Sitemaps. Він справляється із усіма належними йому функціями, і тому є дуже популярний. Крім того, що пагін створює Sitemap, він ще і сповіщає пошукових роботів про зміни в XML файлі. Обновлення файлу проходить автоматично.
Установка плагіна дуже проста.
- Скачуємо пагін з сторінки – Google XML Sitemaps і заливаємо його в директорію wp-content/plugins.
- Після того створюємо два пустих фала sitemap.xml і sitemap.xml.gz в папці де знаходиться config.php. Щоб система змогла змінювати їх вміст, потрібно задати права на файли CHMOD 666.
- Заходимо у панель адміністратора і активовуємо пагін.
- Відкриваємо сторінку з налаштуваннями плагіна в меню «Налаштування» – «XML-Sitemap». Якщо вийде помилка, то перевірте права на створені Вами файли.
Крім вищеперерахованого, в налаштуваннях даного плагіна можна:
- вказати пріоритети сторінок;
- вказати місцезнаходження sitemap.xml;
- вказати вміст файлу, що буде записано в sitemap.xml (архіви, категорії) та багато іншого.
Дивно, але менше половини власників сайтів використовують файл robots.txt.
Хочу показати Вам найчастіші помилки які допускаються при складанні даного файлу від яких часто багато залежить із сторони SEO.
Так як, на блозі використовую двигун Wordpress, то як приклад приведу написання файлу robots.txt спеціально для Wordpress.
User-agent:*
Dissallow: /wp-login.php
Dissallow: /wp-register.php
Dissallow: /?s=
Dissallow: /wp-admin/
Dissallow: /wp-content/
Dissallow: /wp-includes/
Dissallow: /out/
Dissallow: /xmirps.phpUser-agent: Yandex
Dissallow: /wp-login.php
Dissallow: /wp-register.php
Dissallow: /?s=
Dissallow: /wp-admin/
Dissallow: /wp-content/
Dissallow: /wp-includes/
Dissallow: /out/
Dissallow: /xmirps.php
Host: kopaweb.org.ua
Sitemap: http://kopaweb.org.ua/?page_id=556
Як видно, ми заборонили індексацію тих файлів і папок які містять службові документи, а також якщо активний плагін (J)ExR, який робить зовнішні посилання внутрішніми , закриваємо папку, що вказана в його налаштуваннях. Також сторінки від пошуку по блогу, які зовсім не потрібні в індексі.
Якщо говоорити про інші CMS сайтів, то часто зустрічається така помилка, що сайт доступний і сайт.com і сайт.com/index.php. А з позиції SEO це дубль головної сторінки, що не бажано для сайта.
Обов’язково закрийте сторінки яка дублює головну сторінку:
Disallow: /index.php
Наступна помилка заключається в тому, що часто вказуючи Яндексу (як він просить вказувати) як сприймати Ваш домен з “www” або без. Також адрусу розміщення карти сайту тим жеж Вы звільняєте його від команди “User-agent: *”.
User-agent:*
Dissallow: /wp-login.php
Dissallow: /wp-register.php
Dissallow: /?s=
Dissallow: /wp-admin/
Dissallow: /wp-content/
Dissallow: /wp-includes/
Dissallow: /out/
Dissallow: /xmirps.phpUser-agent: Yandex
Host: kopaweb.org.ua
Sitemap: http://kopaweb.org.ua/?page_id=556
І тепер Яндекс буду ігнорувати заборони які ми адресували всім пошуковим роботам, а значить потрібно для Яндекса прописувати ті ж команди, що і для усіх роботів.
Також запамятайте, пустої строки перед “Host” не повинно бути.
Не давно на блозі мого знайомого проситав дуже цікаву статтю, як безплатно, і головне, без великих зусиль підняти тІЦ. Вирішив провести експеремент і дослідити правдивість цієї статті.
Суть полягає в наступному, потрібно знайти сайт з великим показником тИЦ, зберегти його головну сторінку. Тепер створюємо піддомен сайту, і заливаєм збережену головну сторінку (пузатого) сайта. Також потрібно прописати в robots.txt хост сайту з великим тИЦ. В мому випадку файл robots.txt вміщував таку інформацію:
User-agent: Yandex
Host: www.****.ru
Після цього чекаємо один, два апа тІЦ. По опису тІЦ піддомену повинен значно зрости. А ще через один-два апа тІЦ головного домену повинен піднятися.
За роль пузатого сайту вибрав – http://www.****.ru/
Залишається чекати і надіятися. Після закінчення експеременту результати опублікую.
117 днів назад 


