Ответить на тему  [ Сообщений: 218 ] 
На страницу 1, 2, 3, 4, 5 ... 22  След.
Как бороться с дублями Joomla? фильтр гугла за дубли... 
Автор Сообщение
Эксперт
Аватар пользователя

Зарегистрирован: 19 июл 2009, 21:05
Сообщений: 1262
Откуда: Запад Украины
Пол: мужской
Репутация: 1737
Добавить пункт репутацииВычесть пункт репутации
Сообщение Одна статья, разные категории, рабочие ссылки
Доброй ночи!
Вместо того чтобы пойти спать потянуло перед сном странички просмотреть в индексе я.
Заметил фокус.
имеем адрес в браузере к материалу : sitename.com/index.php/kategorija/article.html
если в браузере заменить kategorija на любую другую существующую категорию то страничка продолжат работать , я не поверил, подумал что бок только у меня, полез посмотреть у товарища на сайте, гм, у него также. А каково было моё огорчение, когда заметил эти странички в индексе, получается по разным адресам один и тотже контент, дубли страниц получаются!
далеко не надо идти
возьмём поддомен звирек, что на джумле, заходим в статьи, открываем первую попавшеюся
http://joomla.zvirec.com/articles/4-joo ... -cash.html
переходим в уроки, открываем любой, например этот
http://joomla.zvirec.com/lessons/1-rass ... jbfaq.html

а теперь напишите в нижнем вместо lessons слово articles вуаля . А должно отдавать эррор!!
http://joomla.zvirec.com/articles/1-ras ... jbfaq.html
Что здесь, такого спросите вы?
А как это называется?
Вложение:
2.JPG


Вложение:
1.JPG



П.С. Мая в шоке

П.П.С. кто-то еще хочет рулет с начинкой?

Решение проблемы на третьей странице


У вас нет доступа для просмотра вложений в этом сообщении.

_________________
Блюз - это музыка для хороших людей с плохим настроением, а попса - это наоборот.
простая удобная diafan cms


Последний раз редактировалось xlife 11 сен 2010, 13:49, всего редактировалось 1 раз.



06 апр 2010, 02:23
Профиль Отправить личное сообщение
Администратор
Аватар пользователя

Зарегистрирован: 20 фев 2009, 01:38
Сообщений: 3159
Пол: мужской
Репутация: 3514
Добавить пункт репутацииВычесть пункт репутации
Сообщение Re: Одна статья, разные категории, рабочие ссылки
ДА, действительно есть такое дело... Только вот не пойму, как такие страницы могут попасть в индекс? ведь ссылок на них нигде нет?

Давайте вместе решать этот вопрос. Отписывайтесь, кто что найдет по теме..

_________________
Лучший хостинг по соотношению цена/качество! Бесплатный тестовый доступ 10 дней

Любой сайт обязан приносить прибыль! узнай как! видео-инструкция по работе прилагается!

Здесь раскрутить сайт сможет даже ребенок! Не верите? - а Вы попробуйте!


06 апр 2010, 10:45
Профиль Отправить личное сообщение
Администратор
Аватар пользователя

Зарегистрирован: 20 фев 2009, 01:38
Сообщений: 3159
Пол: мужской
Репутация: 3514
Добавить пункт репутацииВычесть пункт репутации
Сообщение Re: Одна статья, разные категории, рабочие ссылки
А можете откомментировать данный скриншот?

_________________
Лучший хостинг по соотношению цена/качество! Бесплатный тестовый доступ 10 дней

Любой сайт обязан приносить прибыль! узнай как! видео-инструкция по работе прилагается!

Здесь раскрутить сайт сможет даже ребенок! Не верите? - а Вы попробуйте!


06 апр 2010, 12:16
Профиль Отправить личное сообщение
Эксперт
Аватар пользователя

Зарегистрирован: 19 июл 2009, 21:05
Сообщений: 1262
Откуда: Запад Украины
Пол: мужской
Репутация: 1737
Добавить пункт репутацииВычесть пункт репутации
Сообщение Re: Одна статья, разные категории, рабочие ссылки
Здравствуйте!
Извините я вчера был не в состоянии комментировать :drinks:
Материал находился в отдельном разделе в отдельной категории, больше там материалов не было,
собственно я не знаю что комментировать, просто обнаружил ссылки на материал, который никогда не находился в этих категориях, почему паук их увидел для меня не понятно.
П.С. хотите вам пароль дам к я, сами по ним покликаете .

_________________
Блюз - это музыка для хороших людей с плохим настроением, а попса - это наоборот.
простая удобная diafan cms


07 апр 2010, 17:59
Профиль Отправить личное сообщение
Администратор
Аватар пользователя

Зарегистрирован: 20 фев 2009, 01:38
Сообщений: 3159
Пол: мужской
Репутация: 3514
Добавить пункт репутацииВычесть пункт репутации
Сообщение Re: Одна статья, разные категории, рабочие ссылки
хм... У меня просто куча сателитов на jommla и нигде ничего лишнего не попадает в индекс (кроме дубля главной)

Да, эти страницы есть, и к ним можно получить как-то доступ по разным урлам, но ведь эти урлы нигде не светятся?

Какие есть соображения? как они могли скушаться роботом?

_________________
Лучший хостинг по соотношению цена/качество! Бесплатный тестовый доступ 10 дней

Любой сайт обязан приносить прибыль! узнай как! видео-инструкция по работе прилагается!

Здесь раскрутить сайт сможет даже ребенок! Не верите? - а Вы попробуйте!


07 апр 2010, 20:56
Профиль Отправить личное сообщение
Эксперт
Аватар пользователя

Зарегистрирован: 19 июл 2009, 21:05
Сообщений: 1262
Откуда: Запад Украины
Пол: мужской
Репутация: 1737
Добавить пункт репутацииВычесть пункт репутации
Сообщение Re: Одна статья, разные категории, рабочие ссылки
Андрей Галямов писал(а):
Да, эти страницы есть, и к ним можно получить как-то доступ по разным урлам, но ведь эти урлы нигде не светятся?


В том то и дело, ума не приложу, да, вы правильно говорите, урлы не светятся, а пс проиндексировал, фокус повторить не удастся, на днях помониторю гугла индекс ...у меня под 600 страниц на сайте ... у него в индексе 790,

_________________
Блюз - это музыка для хороших людей с плохим настроением, а попса - это наоборот.
простая удобная diafan cms


07 апр 2010, 21:20
Профиль Отправить личное сообщение
Эксперт
Аватар пользователя

Зарегистрирован: 19 июл 2009, 21:05
Сообщений: 1262
Откуда: Запад Украины
Пол: мужской
Репутация: 1737
Добавить пункт репутацииВычесть пункт репутации
Сообщение Re: Одна статья, разные категории, рабочие ссылки
Пропарсил выдачу гугла, хм, тоже есть подозрительные ссылки, но это другая история, хотя честно признатся не понимаю, как они попали в индекс, ведь у меня в роботс запрещены ссылки содержащие знак вопроса
Вложение:
1.JPG

sitename.com/meatless/794-of-the-pie-dough-with-cabbage.html?&cal_offset=0n
Код:
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /index.php/2009-11-07-15-29-35.html
Disallow: /*?


У вас нет доступа для просмотра вложений в этом сообщении.

_________________
Блюз - это музыка для хороших людей с плохим настроением, а попса - это наоборот.
простая удобная diafan cms


07 апр 2010, 22:22
Профиль Отправить личное сообщение
Эксперт
Аватар пользователя

Зарегистрирован: 19 июл 2009, 21:05
Сообщений: 1262
Откуда: Запад Украины
Пол: мужской
Репутация: 1737
Добавить пункт репутацииВычесть пункт репутации
Сообщение Re: Одна статья, разные категории, рабочие ссылки
хм ...интиресненько, а если ссылок понаставлять на страницу то попадёт в индекс?
up: нарыл по данному вопросу в комментариях на одном блоге

Код:
#  Кирилл говорит:
Февраль 15th, 2010 at 09:13

На мой взгляд, в стандартном компоненте есть один очень большой недостаток: подставив алис любой статьи в конец ссылки вида site.ru/category (где category – любая категория вашего сайта), вы можете получить ту же статью.
Пример:
site.ru/tv/623-blurayextracapacity
site.ru/bluray/623-blurayextracapacity

Кроме того, не закрывается доступ к статьям по стандартным ссылкам, без обработки sef компонентом.

[Reply]

Beliyadm Reply:
Февраль 15th, 2010 at 11:46

Да, у стандартного компонента есть такая ошибка. Но – на индексацию это не влияет, данных ссылок же на сайте не существует, потому в индекс он не попадают. Единственно для чего можно использовать эту ошибку – с стороны конкурентов производить подлог ссылок для роботов по разным нехорошим словам с целью забанить и понизить в рейтинге, но это уже отдельный вопрос.
Хочется верить, что в 1.6 данная проблема будет исправлена

[Reply]

Кирилл Reply:
Февраль 15th, 2010 at 12:04

Всё не так просто. В индекс они, как раз-таки, попадают … не знаю как, но это факт. Не хочу сейчас делать скрины, просто поверьте наслово (ну или на форуме поищите мою тему, ник wharfadale).

Это, конечно, не у всех статей (около 5%), но всё же меня это очень беспокоит. Причём для некоторых статей встречаются ссылки всех трёх видов: правильный урл, не sef урл и урл с другой категорией, но ведущий на ту же статью.

[Reply]

Beliyadm Reply:
Февраль 15th, 2010 at 12:09

В индекс может попасть лишь то, что встречается на самом сайте. При правильной структуре меню и прочего на сайте должны быть только лишь SEF ссылки. Без сеф и подобные ошибочные никоим образом не должны фигурировать, попробуйте отследить с каких страниц поисковики нашли их и дальше можно будет думать, что с этим делать.
С описанной ситуацией не встречался ни разу, на форуме кто-то из коллег описывал подобную возможность, к сожалению не помню кто и где

http://blog.pbelkov.com/2009/11/09/sef-in-joomla/

П.С. получается полное Г (: ?

_________________
Блюз - это музыка для хороших людей с плохим настроением, а попса - это наоборот.
простая удобная diafan cms


08 апр 2010, 21:01
Профиль Отправить личное сообщение
Администратор
Аватар пользователя

Зарегистрирован: 20 фев 2009, 01:38
Сообщений: 3159
Пол: мужской
Репутация: 3514
Добавить пункт репутацииВычесть пункт репутации
Сообщение Re: Одна статья, разные категории, рабочие ссылки
Да , это подозрительно

Насчет полного Г... ну незнаю. Мне кажется, что это редкие случаи,И я придерживаюсь позиции Beliyadm из приведенной цитаты комментов.
По поводу Яндекса, для него если запретить все, что с вопросительным знаком, то такие страницы с большой вероятностью не попадут в индекс.

А вот Гугл - это что-то с чем-то. На серче читал, что чувак полностью запретил индексировать гуглу папку с изображениями, а ему хоть-бы хны... все изображения в индексе :) Причем это не один человек писал.

ИМХО не стоит так париться. Я не знаю как, но раньше, когда я еще не запрещал к индексации все, что с вопросительным знаком и о joomla вообще мало чего знал, я делал полуГС на ней. Висят в индексе уже достаточно долго. Нигде никаких дублей. И сайт не один...

Да , возможно, какие-то дубли в индекс и попадают, но потом они выкидываются яндексом.
Аналогично и с клеем. Все переживают по поводу этого клея,мол как склеить с www и без. Хотя со временем,яшка сам клеит. Максимум у меня висели страницы с www и одновременно без, 3 месяца. Затем был клей.

Однако если попадется информация, как побороть этот глюк с категориями, просьба выкладывать здесь

_________________
Лучший хостинг по соотношению цена/качество! Бесплатный тестовый доступ 10 дней

Любой сайт обязан приносить прибыль! узнай как! видео-инструкция по работе прилагается!

Здесь раскрутить сайт сможет даже ребенок! Не верите? - а Вы попробуйте!


09 апр 2010, 12:57
Профиль Отправить личное сообщение
Модератор
Аватар пользователя

Зарегистрирован: 09 мар 2010, 00:53
Сообщений: 4018
Репутация: 2764
Добавить пункт репутацииВычесть пункт репутации
Сообщение Re: Одна статья, разные категории, рабочие ссылки
У меня в гугл было такое.
Для входа в админку сайта сделал так, что надо было набирать в адресной строке браузера руками
имя_сайта.ru/index.php?a=kuku.
Ни где на сайте такой ссылки не было, а гугл её как-то увидел.

_________________
Не забывайте отдыхать!
www.jscan.ru - ежедневно новые японские сканворды и судоку различной сложности!


09 апр 2010, 14:00
Профиль Отправить личное сообщение WWW
Показать сообщения за:  Сортировать по:  
Ответить на тему   [ Сообщений: 218 ]  На страницу 1, 2, 3, 4, 5 ... 22  След.
   Похожие темы   Автор   Ответов   Просмотров   Последнее сообщение 
Нет новых непрочитанных сообщений в этой теме Фильтр модуля "mod_archive".

в форуме ШАБЛОНЫ И ВНЕШНЕЕ ОФОРМЛЕНИЕ JOOMLA

andermar

0

1164

18 окт 2012, 15:29

andermar Перейти к последнему сообщению

Нет новых непрочитанных сообщений в этой теме Как добавить фильтр по заголовку в "шаблон блога категории"

в форуме ФОРМИРОВАНИЕ СТРУКТУРЫ САЙТА И ВОПРОСЫ ПО ФУНКЦИОНИРОВАНИЮ СТАНДАРТНОЙ СБОРКИ JOOMLA

serg450453

0

1228

01 июн 2011, 15:35

serg450453 Перейти к последнему сообщению

Нет новых непрочитанных сообщений в этой теме Стандартный шаблон раздела/ как убрать поле фильтр в списке.

в форуме ФОРМИРОВАНИЕ СТРУКТУРЫ САЙТА И ВОПРОСЫ ПО ФУНКЦИОНИРОВАНИЮ СТАНДАРТНОЙ СБОРКИ JOOMLA

andreyDKB

2

1499

16 фев 2011, 01:11

bagirik Перейти к последнему сообщению

Нет новых непрочитанных сообщений в этой теме Какой фильтр нужно использовать для привязки во Views товару

в форуме Drupal 7

erplk

1

974

29 мар 2013, 18:09

LeGront Перейти к последнему сообщению

Нет новых непрочитанных сообщений в этой теме Как убрать в шаблоне списка категории фильтр по заголовку...

[ На страницу: 1, 2 ]

в форуме ФОРМИРОВАНИЕ СТРУКТУРЫ САЙТА И ВОПРОСЫ ПО ФУНКЦИОНИРОВАНИЮ СТАНДАРТНОЙ СБОРКИ JOOMLA

Вованыч

11

3781

10 фев 2011, 05:54

Вованыч Перейти к последнему сообщению


Кто сейчас на форуме

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 5


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Перейти: