[Общая тема]robots и sitemap для phpbb3
Модераторы: Vl@d1m1r, Lorem Ipsum, Atlas
Правила форума
----
----
- Lorem Ipsum
- Прописался тут надолго
- Сообщения: 1974
- Стаж: 11 лет 8 месяцев
- Контактная информация:
robots и sitemap для phpbb3
Я правильно понимаю, что если устанавливаются какие-то моды, где есть отдельная страничка для просмотра чего-нибудь, то её нужно вносить в роботс? Например, облако тегов выводится на /phpbb_topic_tagging.php , Система репутации - /reputation.php , Облако пользователей - /allmembers.php . Ботам там делать нечего.
Я уже прошел тот период когда можно было забывать про очистку кеша ©salexcorp
- DeaDRoMeO
- Старожил Форума
- Сообщения: 16763
- Стаж: 13 лет 2 месяца
- Откуда: Витебск
- Контактная информация:
robots и sitemap для phpbb3
Правильно, то что ботам незачем видеть можно запретить в роботс)
На вопросы, связанные с phpBB, по ЛС не отвечаю !!!
- Lorem Ipsum
- Прописался тут надолго
- Сообщения: 1974
- Стаж: 11 лет 8 месяцев
- Контактная информация:
robots и sitemap для phpbb3
Ок, после этого достаточно просто загрузить файл в корень и всё или нужно в яндексе опять его прогонять?
Я уже прошел тот период когда можно было забывать про очистку кеша ©salexcorp
- Lorem Ipsum
- Прописался тут надолго
- Сообщения: 1974
- Стаж: 11 лет 8 месяцев
- Контактная информация:
robots и sitemap для phpbb3
Что именно правильно? Первая или вторая часть вопроса?))
Я уже прошел тот период когда можно было забывать про очистку кеша ©salexcorp
- akella1900
- Хорошо тут живется
- Сообщения: 1568
- Стаж: 11 лет 5 месяцев
- Откуда: Слявный город Николяев :-)
- Контактная информация:
robots и sitemap для phpbb3
Обе))) вторая если хочешь чтоб быстрее было))
back'up придумали трусы Ваша воля моими руками, но платно. Стучим в skype akella1900.
- pmebear
- Зашел немного посидеть
- Сообщения: 67
- Стаж: 10 лет 11 месяцев
- Откуда: Москва
- Контактная информация:
robots и sitemap для phpbb3
Добрый день, какие разделы форума нужно обязательно оставить роботам для индексации?
- DeaDRoMeO
- Старожил Форума
- Сообщения: 16763
- Стаж: 13 лет 2 месяца
- Откуда: Витебск
- Контактная информация:
robots и sitemap для phpbb3
Ну главная, список тем в подфорумах и сами темы, иначе доступ к страницам index.php , viewforum.php , viewtopic.php
На вопросы, связанные с phpBB, по ЛС не отвечаю !!!
- pmebear
- Зашел немного посидеть
- Сообщения: 67
- Стаж: 10 лет 11 месяцев
- Откуда: Москва
- Контактная информация:
robots и sitemap для phpbb3
Сергей, спасибо за оперативный ответ.
robots.txt на мой взгляд важен для оптимизации форума, но, к сожалению в теме нет окончательной инструкции FAQ по его созданию.
Можно ли прилепить к началу темы пошаговую инструкцию для чайников.
1. как создать;
2. куда положить
2. какие функции за что отвечают Disallow: Sitemap: Clean-param: Crawl-delay:
3. самый полный вид robots.txt (из которого методом исключения можно слепить то что требуется)
4. как проверять на сайтах поисковиков (способы, ссылки), например как проверить " принял яшка... форум " или нет
В тексте темы есть достаточно примеров, которые в том числе содержат неточности.
Я, к сожалению, так и не понял как проверять индексацию поисковиками. Спасибо.
robots.txt на мой взгляд важен для оптимизации форума, но, к сожалению в теме нет окончательной инструкции FAQ по его созданию.
Можно ли прилепить к началу темы пошаговую инструкцию для чайников.
1. как создать;
2. куда положить
2. какие функции за что отвечают Disallow: Sitemap: Clean-param: Crawl-delay:
3. самый полный вид robots.txt (из которого методом исключения можно слепить то что требуется)
4. как проверять на сайтах поисковиков (способы, ссылки), например как проверить " принял яшка... форум " или нет
В тексте темы есть достаточно примеров, которые в том числе содержат неточности.
Я, к сожалению, так и не понял как проверять индексацию поисковиками. Спасибо.
- DeaDRoMeO
- Старожил Форума
- Сообщения: 16763
- Стаж: 13 лет 2 месяца
- Откуда: Витебск
- Контактная информация:
robots и sitemap для phpbb3
Попробую сделать на досуге)
На вопросы, связанные с phpBB, по ЛС не отвечаю !!!
- Alex31
- Активно осваиваю Форум
- Сообщения: 221
- Стаж: 10 лет 8 месяцев
- Откуда: Белгород
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
Загрузил вот такой robots
Но не гугл не яндекс его не находит, почему? Установил sitemap, гугл принял, яндекс не понятно пока.
Код: Выделить всё
User-agent: *
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Sitemap: http://golf2-jetta2.ru/forum/sitemap.php
User-agent: Yandex
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Host: golf2-jetta2.ru
Sitemap: http://golf2-jetta2.ru/forum/sitemap.php
Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php
- DeaDRoMeO
- Старожил Форума
- Сообщения: 16763
- Стаж: 13 лет 2 месяца
- Откуда: Витебск
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
Для примера, у вас же форум в папке находится, разве не надо дописывать имя папки ?Alex31 писал(а):/viewtopic.php?p=*
Где он вообще лежит, в какой папке ?Alex31 писал(а):Но не гугл не яндекс его не находит, почему?
На вопросы, связанные с phpBB, по ЛС не отвечаю !!!
- Alex31
- Активно осваиваю Форум
- Сообщения: 221
- Стаж: 10 лет 8 месяцев
- Откуда: Белгород
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
Да в том то и дело в паке forum, мне так на сервере сделали. А куда мне добавить папку? Лежит в папке forum, это и есть вроде корень форума.DeaDRoMeO писал(а):Где он вообще лежит, в какой папке ?
- Alex31
- Активно осваиваю Форум
- Сообщения: 221
- Стаж: 10 лет 8 месяцев
- Откуда: Белгород
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
Я понял, надо /forum/viewtopic.php?p=*)DeaDRoMeO писал(а):/viewtopic.php?p=*
- Alex31
- Активно осваиваю Форум
- Сообщения: 221
- Стаж: 10 лет 8 месяцев
- Откуда: Белгород
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
Кинул такой
Только не в папке /forum/, а на главную на сервере. Все вроде приняли. Спасибо за помощь.
Кстати и вопрос, такой оставить robots или что то изменить?
Код: Выделить всё
User-agent: *
Disallow: /forum/faq.php
Disallow: /forum/mcp.php
Disallow: /forum/memberlist.php
Disallow: /forum/posting.php
Disallow: /forum/report.php
Disallow: /forum/search.php
Disallow: /forum/style.php
Disallow: /forum/ucp.php
Disallow: /forum/viewtopic.php?p=*
Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
Disallow: /forum/viewtopic.php?f=*&t=*&view=next
Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
Sitemap: http://golf2-jetta2.ru/forum/sitemap.php
User-agent: Yandex
Disallow: /forum/faq.php
Disallow: /forum/mcp.php
Disallow: /forum/memberlist.php
Disallow: /forum/posting.php
Disallow: /forum/report.php
Disallow: /forum/search.php
Disallow: /forum/style.php
Disallow: /forum/ucp.php
Disallow: /forum/viewtopic.php?p=*
Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
Disallow: /forum/viewtopic.php?f=*&t=*&view=next
Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
Host: golf2-jetta2.ru
Sitemap: http://golf2-jetta2.ru/forum/sitemap.php
Clean-param: sid /forum/index.php
Clean-param: sid /forum/viewforum.php
Clean-param: sid /forum/viewtopic.php
Кстати и вопрос, такой оставить robots или что то изменить?
- DeaDRoMeO
- Старожил Форума
- Сообщения: 16763
- Стаж: 13 лет 2 месяца
- Откуда: Витебск
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
Вроде ничего лишнего не вижу, нормально)
На вопросы, связанные с phpBB, по ЛС не отвечаю !!!
- Alex31
- Активно осваиваю Форум
- Сообщения: 221
- Стаж: 10 лет 8 месяцев
- Откуда: Белгород
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
После того как установил мод sitemap и кинул такой robots
В вебмастер гугл, опять стали увеличиваться Повторяющиеся заголовки (теги title).
К примеру вот одна и таже тема viewtopic.php?f=20&t=79&start=30
viewtopic.php?t=79&p=2061
Вот еще viewtopic.php?t=258&p=1482
viewtopic.php?f=12&t=258
И таких довольна много. Как это исправить?
Еще там 2 главных страницы /forum/ и /forum/index.php
Может это из за того что я убрал /index.php?
Код: Выделить всё
User-agent: *
Disallow: /forum/faq.php
Disallow: /forum/mcp.php
Disallow: /forum/memberlist.php
Disallow: /forum/posting.php
Disallow: /forum/report.php
Disallow: /forum/search.php
Disallow: /forum/style.php
Disallow: /forum/ucp.php
Disallow: /forum/viewtopic.php?p=*
Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
Disallow: /forum/viewtopic.php?f=*&t=*&view=next
Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
Sitemap: http://golf2-jetta2.ru/forum/sitemap.php
User-agent: Yandex
Disallow: /forum/faq.php
Disallow: /forum/mcp.php
Disallow: /forum/memberlist.php
Disallow: /forum/posting.php
Disallow: /forum/report.php
Disallow: /forum/search.php
Disallow: /forum/style.php
Disallow: /forum/ucp.php
Disallow: /forum/viewtopic.php?p=*
Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
Disallow: /forum/viewtopic.php?f=*&t=*&view=next
Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
Host: golf2-jetta2.ru
Sitemap: http://golf2-jetta2.ru/forum/sitemap.php
Clean-param: sid /forum/index.php
Clean-param: sid /forum/viewforum.php
Clean-param: sid /forum/viewtopic.php
К примеру вот одна и таже тема viewtopic.php?f=20&t=79&start=30
viewtopic.php?t=79&p=2061
Вот еще viewtopic.php?t=258&p=1482
viewtopic.php?f=12&t=258
И таких довольна много. Как это исправить?
Еще там 2 главных страницы /forum/ и /forum/index.php
Может это из за того что я убрал /index.php?
- DeaDRoMeO
- Старожил Форума
- Сообщения: 16763
- Стаж: 13 лет 2 месяца
- Откуда: Витебск
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
Обычное дело для нашего двига, просто для страниц одной темы везде тайтл одинаковый, что ж поделать
На вопросы, связанные с phpBB, по ЛС не отвечаю !!!
- Alex31
- Активно осваиваю Форум
- Сообщения: 221
- Стаж: 10 лет 8 месяцев
- Откуда: Белгород
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
А может мне robots кинуть все таки в папку /форум/? Можно попробовать?
Странно, если кидаю в корень форума, тоrobots яндекс не находит.
Странно, если кидаю в корень форума, то
- DeaDRoMeO
- Старожил Форума
- Сообщения: 16763
- Стаж: 13 лет 2 месяца
- Откуда: Витебск
- Контактная информация:
[Общая тема]robots и sitemap для phpbb3
Оставляйте там где его видят, тем более индексация идет нормально
На вопросы, связанные с phpBB, по ЛС не отвечаю !!!