Usuń zduplikowane wpisy w k2. Jak radzić sobie ze zduplikowanymi stronami w Joomla? Wtyczka JL No Doubles do zwalczania duplikatów stron

Dzień dobry wszystkim, jeśli czytacie ten artykuł, oznacza to, że podobnie jak wielu początkujących twórców stron internetowych, macie całkowicie uzasadnione pytanie - jak radzić sobie ze zduplikowanymi stronami w Joomla.

W tym artykule postaram się odpowiedzieć na to pytanie. Najpierw porozmawiajmy o niebezpieczeństwach związanych z pojawieniem się zduplikowanych stron w serwisie, następnie przyjrzymy się gotowym rozwiązaniom do walki z duplikatami, a na koniec przyjrzymy się alternatywom sposoby radzenia sobie ze zduplikowanymi stronami.

Dlaczego warto pozbyć się zduplikowanych stron?

Nie jest tajemnicą, że Joomla, jak każdy inny system zarządzania treścią, w trakcie swojej pracy tworzy identyczne strony dostępne pod różnymi adresami witryn – duplikaty. Dla osób odwiedzających Twoją witrynę te same strony są nieszkodliwe; mogą nawet nie być świadomi ich istnienia.

Jednak duplikaty, które są nieszkodliwe dla odwiedzających, mogą znacząco wpłynąć na pozycję witryny w wynikach wyszukiwania. Dlaczego to się dzieje?

Wyobraźmy sobie sytuację – napisałeś kilka unikalnych materiałów i opublikowałeś je na swojej stronie internetowej. Roboty wyszukujące je zaindeksowały, wszystko jest w porządku, jednak po pewnym czasie robot wyszukujący znajduje duplikaty tych stron. Robot wyszukiwania nie rozumie, że jest to duplikat, dla niego są to dwie zupełnie różne strony, w rezultacie początkowo unikalny materiał nie jest już unikalny.

W wyniku pojawienia się w witrynie dużej liczby identycznych stron (duplikatów), pozycja witryny w wynikach wyszukiwania może znacznie się „osłabnąć”. Dlatego warto jak najszybciej pozbyć się zduplikowanych stron.

Dlaczego pojawiają się duplikaty?

Duplikaty w CMS Joomla pojawiają się w wyniku instalacji dodatkowych rozszerzeń. Ale to nie jedyny powód ich powstania.

Równie częstą przyczyną powstawania zduplikowanych stron jest nieprzemyślana struktura witryny. Jak można to połączyć, pytasz? Tak, to bardzo proste – utworzyłeś na stronie kilka kategorii z jedną kategorią nadrzędną i umieściłeś materiały w tych kategoriach. Wewnątrz materiałów tworzysz linki do wcześniej utworzonych materiałów i tak dalej. Spójrz na przykład na zrzut ekranu:

Jeśli nie utworzysz menu dla kategorii, adres strony może wyglądać następująco:

Http://joom4all..php?option=com_content&view=article&id=38&catid=10

Adres jest daleki od idealnego i chciałeś pozbyć się cyfr w pasku adresu. Aby to zrobić, utwórz pozycje menu dla kategorii i materiałów. Po tym adres okazał się atrakcyjniejszy:

Http://site/sites-creation/basics/intro

I wszystko byłoby dobrze, ale stare adresy stron nie zniknęły, pozostają jako duplikaty. W rezultacie ta sama strona może mieć kilka adresów jednocześnie:

Http://site/32-sites-creation/10-basics/38-intro http://site/32-sites-creation/basics/intro http://joom4all..php?option=com_content&view=article&id=38&catid =10

Nie jest to przyjemna sytuacja, prawda, poza tym roboty wyszukiwawcze traktują te wszystkie strony zupełnie inaczej.

Sposoby radzenia sobie z duplikatami stron

Oczywiście najlepiej na początkowym etapie unikać pojawiania się zduplikowanych stron - przemyśl wcześniej strukturę witryny, utwórz niezbędne kategorie i pozycje menu. Ale jak pokazuje praktyka, nie wszyscy to robią i z biegiem czasu pojawia się pytanie, jak usunąć duplikaty z wyników wyszukiwania.

Istnieje kilka możliwości radzenia sobie z duplikatami:

• Korzystanie ze specjalnych rozszerzeń
• Plik robots.txt
• Przekieruj 301 w pliku htaccess
• Użyj panelu webmastera, aby usunąć niepotrzebne adresy
• Komponent przekierowania

Wtyczka JL No Doubles do zwalczania duplikatów stron

Najprostszy i zarazem wystarczający skuteczny sposób na walkę z duplikatami stron To jest użycie rozszerzeń. Jednym z takich rozszerzeń jest Wtyczka JL No Doubles.

Wtyczka jest bardzo lekka i nie wymaga żadnych specjalnych ustawień. Wszystko, co musisz zrobić, to pobrać tę wtyczkę, zainstalować ją i włączyć. Resztę pracy wykona sam.

Wtyczka JL No Doubles usuwa zduplikowane strony w ponad dwudziestu komponentach, w tym w komponencie com_content. Możesz skonfigurować wyświetlanie błędu 404 lub przekierowania 301 na właściwą stronę serwisu. Strona ustawień wtyczki wygląda następująco:

Istnieje tylko pięć parametrów konfiguracyjnych wtyczki:

• Klucz licencyjny– aby aktywować wtyczkę z komponentami k2, Virtuemart, Zoo.
• Wielość limitów– ustawienie kategorii materiałów Joomla. Możesz ustawić przekierowanie podczas tworzenia linków takich jak /advanced?start=3. Wystarczy, że wskażesz ilość materiałów prezentowanych w danej kategorii.
• Użyj przekierowań 301– możesz włączyć możliwość korzystania z przekierowania na właściwą stronę lub (jeśli ustawione na „nie”) wystawić błąd 404. Jeśli Twoja witryna istnieje już od dłuższego czasu i inne witryny prowadzą do jej stron, to polecam ustawić przekierowanie, aby nie stracić na wadze stron.
• Alias– ustawienie, które zastępuje alias dla linków takich jak komponent/treść/artykuł (domyślnie home).
• Zatrzymaj słowa– są to ciągi znajdujące się w adresie strony, które nie powinny być przetwarzane.

Ustaliliśmy podstawowe ustawienia, teraz przejdźmy do zakładki „Komponenty”:

W tej zakładce wybieramy komponenty, które są wykorzystywane na stronie i są dostępne do indeksowania. Domyślnie komponent com_content jest już wybrany. Nie powinieneś wybierać wszystkich możliwych komponentów, szczególnie jeśli ich nie użyjesz, spowoduje to niepotrzebne obciążenie Twojej witryny.

Korzystanie z pliku Robots.txt

Bez względu na to, jak świetna jest wtyczka do przekierowywania stron, nie będziesz w stanie pozbyć się wszystkich duplikatów. W takim przypadku możesz uniemożliwić robotom wyszukiwania indeksowanie niektórych stron witryny, innymi słowy zablokować do nich dostęp.

Wszystkie zawiłości związane z konfiguracją pliku Robots.txt omówiliśmy już w tym artykule. W skrócie powiem tylko, że istnieje dyrektywa blokująca część ciebie przed „oczami” robota Uniemożliwić .

Przekierowanie 301 i plik htaccess

Innym powszechnym sposobem radzenia sobie z duplikatami jest skonfigurowanie przekierowania, innymi słowy przekierowania 301 na właściwą stronę. Można to zrobić w pliku „ .htaccess ».

Aby utworzyć przekierowanie, musisz skorzystać z dyrektywy RewriteRule, ale musisz upewnić się, że na Twoim hostingu jest włączony moduł mod_rewrite.

Php na stronę serwisu, w tym celu w pliku „.htaccess” po dyrektywie RewriteEngine On piszemy następującą linijkę:

RewriteRule http://site/index.php$ http://site

Pracę z plikiem „.htaccess” omówiliśmy bardziej szczegółowo w tym artykule.

Komponent przekierowania

Całkiem przydatny i jednocześnie komponent wbudowany w Joomla 3, który pozwala na ręczną konfigurację przekierowania strony. Komponent ten wykorzystuje do swojego działania specjalną wtyczkę, która domyślnie jest wyłączona.

Początkowo należy włączyć wtyczkę, na szczęście nie trzeba jej szukać m.in., gdyż po przejściu na stronę „Komponenty” -> „Przekierowanie” otrzymamy komunikat o konieczności włączenia wtyczki i link, aby go aktywować.

Po włączeniu wtyczki możesz utworzyć przekierowanie podając początkowy (stary) i końcowy (nowy) adres strony:

Ta metoda jest dobra, gdy nie ma zbyt wielu zduplikowanych stron.

Podsumujmy to

Podsumowując, chciałbym powiedzieć, że chociaż Joomla słynie z tworzenia duplikatów stron, istnieje wiele sposobów, aby się ich pozbyć. Możesz sam zdecydować, która metoda jest najlepsza, ale mogę powiedzieć, że lepsze będzie zintegrowane podejście do rozwiązania tego problemu. A zacząć należy od odpowiedniego podejścia do tworzenia struktury serwisu.

Ponadto warto pomyśleć o tym, jak pozbyć się pliku Index.php w pasku adresu witryny, pomoże to również zmniejszyć liczbę zduplikowanych stron.

Tworzenie i promowanie stron internetowych w statycznym HTML staje się coraz mniej popularne, a większość webmasterów przechodzi na nowoczesny CMS, w szczególności Joomla, który oprócz swoich zalet może również denerwować użytkownika, przede wszystkim poprzez powielanie stron. Zduplikowane strony w Joomla to swego rodzaju plaga webmasterów, choć szczerze mówiąc, winnych tego jest wiele systemów automatyzacji stron internetowych.

Szukaj duplikatów

Najpierw zobaczmy, jak to ustalić zduplikowane strony i dlaczego negatywnie wpływają na proces promocji serwisu. Najłatwiejszym sposobem ustalenia duplikacji jest skorzystanie z wyszukiwania zaawansowanego w Yandex, gdzie wpisujemy Twój projekt w wierszu „strona”, a to lub inne zapytanie w wierszu wyszukiwania. W rezultacie możesz przeglądać strony witryny według ich trafności; istnieją również strony, które się powielają. Jeszcze łatwiej jest skorzystać z Netpeak Spider, który jednym kliknięciem wyładuje strony i znajdzie w nich duplikaty.

Drugim ważnym pytaniem jest to, dlaczego wyszukiwarki odbierają to negatywnie, bo nie jest to celowa próba oszukania wyszukiwarek, ale problemy techniczne CMS-a, o których w zasadzie roboty powinny wiedzieć. Faktem jest, że to roboty potrafią rozpoznać takie strony jako celowy spam, bo tak naprawdę ten sam materiał jest dostarczany pod dwoma różnymi adresami. Próby korespondencji z obsługą techniczną Yandex nie prowadzą do niczego, dlatego powinieneś starać się unikać duplikatów stron Joomla.

Usuwanie duplikatów

Nie zezwalaj: /szukaj/

Nie zezwalaj: /*.pdf

Nie zezwalaj: /*print=1

Nie zezwalaj: /*type=atom

Nie zezwalaj: /*type=rss

Nie zezwalaj: /*zadanie=rss

Nie zezwalaj: /*?sl*

Nie zezwalaj: /*?sl*

Tym samym odcięta zostaje główna baza magazynowa, w której Joomla może umieszczać duplikaty. Jeśli ktoś naprawdę potrzebuje otworzyć jakieś strony np. dla komponentu xmap, czyli żeby dodać mapę serwisu do panelu webmastera, to potrzebne strony można łatwo otworzyć za pomocą dyrektywy Zezwalaj:, która jest umieszczona przed Uniemożliwić:.

Jednak osobiście nie dano mi życia przez zduplikowane strony Joomla, takie jak

Długie wyszukiwania nie przyniosły niczego pozytywnego poza ręcznym zamknięciem setek lewych linków w pliku robots.txt. Jednak pewnego dnia odpowiedź przyszła jak olśnienie i otworzyła mi oczy na najprostsze rzeczy, z czym wiem na pewno, że nie tylko ja się z nią spotkałem. Wielu dzisiaj praktykuje (i robi to poprawnie) promocję witryny w sieciach społecznościowych, instalując przyciski integracji. Jednocześnie nie wszyscy zwracają uwagę na fakt, że niektóre wtyczki po zintegrowaniu z Twitterem po prostu odcinają link i aby rozwiązać problem, należy skonfigurować lub wymienić wtyczkę, ponieważ roboty podążają za linkiem „tweetuj” i kończą w jego przyciętym widoku, do którego wchodzą z powodu swojej elektronicznej ignorancji w zakresie indeksowania.

Problem okazał się prosty jak miedziana umywalka, szkoda, że ​​w ten sposób usunięto tylko część ujęć, chociaż to właśnie ten element najbardziej mnie niepokoił. Okazuje się, że niektóre błędy optymalizacyjne nadal występują na skutek połączenia niedopatrzenia webmastera i wad CMS, więc można i należy temu zaradzić. Powodzenia.

Jeśli nie podobają Ci się duplikaty typu /sobstven-sate/eksperiment-seo/383.html, czyli skrócone adresy stron, skorzystaj z wtyczki Joomla Shnodoubles, którą znajdziesz googlując lub pisząc do mnie w komentarzach, dzięki niemu całkowicie rozwiązałem problem w ciągu kilku minut. Po przemyśleniu tego i zmęczeniu rezygnacją z subskrypcji sugeruję pobranie nodoubles dla Joomla bezpośrednio ze strony.

Oferuję również film na temat usuwania duplikatów w Joomla za pomocą przekierowania 301 -

Pytania i odpowiedzi

Czy można automatycznie pozbyć się duplikatów?

Brak duplikatów jest gwarantowany w 90% w trybie automatycznym. W przypadku Joomli wystarczy skonfigurować roboty i htaccess, a także zająć się łączeniem stron w główną nawigację. Jednakże w miarę rozwoju witryny mogą pojawiać się duplikaty, dlatego należy je śledzić za pomocą Netpeak Spider.

Czy pająki PS nie rozumieją, że duplikaty w Joomla są błędem twórców?

Dlaczego właściciel nie naprawił tego błędu? Jeśli kupisz samochód z wadą, to nie będziesz narzekał, że policja drogowa ukarała Cię mandatem za to, że nie świecą reflektory lub spaliny nie spełniają norm? Nie ma sensu kontaktować się z supportem, ponieważ CMS nie jest płatny.

Obecnie rzadko kiedy są surowo karane za duplikaty, ale... Jeśli na przykład zduplikowane strony, w wyszukiwaniu znajdują się 3-4 dokumenty o tej samej treści, ale różnych adresach URL, to czy myślisz, że waga statyczna będzie maksymalna na każdym z nich, czy będzie się rozmazywać? Ostatecznie to Ty decydujesz, czy potrzebujesz ozdobnej strony śmieciowej, czy też chcesz dzielić się informacjami z użytkownikami i czerpać z tego zysk, jeśli poprawnie skonfigurujesz CMS.

W tym artykule chcę porozmawiać o zduplikowanych stronach w Joomla. Na ten temat napisano wiele artykułów, jednak wydaje mi się, że warto zapisać mój pogląd na ten problem. W tym artykule opowiem o Joomla 3, chociaż prawie wszystkie wskazówki dotyczą Joomla 2.5.

Problem zduplikowanych stron w Joomla sięga korzeni samego CMS-a, a dokładniej nawet nie samej Joomli, ale przodka CMS Mambo. Fakt jest taki, że wtedy nie myślano o CNC (adresach URL czytelnych dla człowieka), a kiedy problem stał się istotny i wypuszczono Joomla 1.5, zamiast radykalnie przerobić system linków, zrobiono blot, z którym mamy do czynienia teraz . Tak, wtedy wydawało się to rozwiązaniem problemu, ale jak widzimy, półśrodek urósł do rangi problemu globalnego.

Na szczęście twórcy Joomli rozumieją, że jest problem, ale nie chcą podejmować radykalnych kroków, które swoją drogą zaproponowała społeczność. Odbyła się nawet udana zbiórka pieniędzy na nowy router Joomla, ale zmiany z trudem przedostają się do głównej dystrybucji Joomla.

Co więc faktycznie robi Joomla, aby uniknąć duplikatów?

Znów poszli drogą półśrodków i wprowadzili tag kanoniczny, który ma wskazywać prawdziwą stronę Joomla. Nie będziemy rozmawiać o ciernistej ścieżce wdrożenia, zaznaczę tylko, że była naprawdę drażliwa. I powiem, że ta metoda naprawdę pozwala zmniejszyć liczbę duplikatów na stronie, ale problem w tym, że ta metoda prawie nie działa w przypadku komponentów Joomla, ponieważ twórcy komponentów muszą zadbać o wdrożenie wsparcia, prawidłowe wsparcie i to nie zawsze się zdarza. I szczerze mówiąc, sam tag kanoniczny nie jest panaceum.

O tej prostej i skutecznej metodzie opowiem poniżej.

W rzeczywistości ta metoda pomoże Ci kilkukrotnie zmniejszyć liczbę ujęć. W mojej praktyce pozwoliło mi to zredukować ujęcia 10-krotnie.

Czego potrzebujemy do tego?

• Trochę czasu i ręki

Pierwszą rzeczą, o której mówi nam Google, jest wykluczenie zduplikowanej domeny.

Jak to zrobić?

Przekierowanie z domeny www na domenę inną niż www. Oznacza to, że wchodzimy na stronę www.site.ru i zostajemy przekierowani na stronę site.ru.

Dodaj następującą regułę do pliku .htaccess.

RewriteCond %(HTTP_HOST) ^www\.site\.ru$ RewriteRule ^(.*)$ http://site.ru/$1

Zamień Site.ru na swoją domenę.

Przejdźmy teraz do przyjemnych rzeczy.

Zainstaluj wtyczkę JL No Doubles i włącz ją w menedżerze wtyczek. Jeśli masz tylko standardowe materiały Joomla, nie musisz niczego konfigurować. Właściwie ta seria prostych kroków pomoże Ci radykalnie zmniejszyć liczbę duplikatów na stronie.

Rozmawialiśmy o tym, dlaczego powstają i jak ich szukać. W tym artykule powiem Ci, jak usunąć duplikaty lub zapobiec ich pojawianiu się w wynikach wyszukiwania.

Ponieważ każdy przypadek jest indywidualny, rozważymy najpopularniejsze metody, które sprawdzają się doskonale w 99% przypadków. Możesz wybrać jeden dla siebie lub użyć go w kombinacji.

Chociaż wszystkie te metody można zastosować w każdym innym systemie CMS, szczegółowo omówię funkcje Joomla.

Wszystkie te przykłady są prawidłowe, jeśli włączyłeś standardowe przekierowanie SEF i URL w ustawieniach globalnych J.

• 1. Wtyczka do Joomli

Pierwszą rzeczą, którą możesz zrobić, jeśli masz zamieszanie w adresach URL (kiedy linki są utworzone zarówno z aliasu kategorii, jak i elementu menu), jest zainstalowanie wtyczki Shnodoubles od sherza.

Znakomita wtyczka, radzi sobie ze swoim zadaniem w 100%. Po jego zainstalowaniu błędnie utworzony link (z aliasu kategorii) zostaje przekierowany na właściwy (z pozycji menu). Możesz pobrać tę wspaniałą wtyczkę, która eliminuje duplikaty dla Joomla 2.5 (bezpośredni link!)

Po aktywacji wtyczki niektóre duplikaty po prostu się sklejają.

• 2. Robots.txt dla Joomla

Plik ten znajduje się w standardowej dystrybucji Joomla, znajduje się w katalogu głównym i jest dostępny pod linkiem site.ru/robots.txt. Głównym celem jest to, że daje instrukcje do wyszukiwania robotów w celu zaindeksowania witryny. Za jego pomocą możesz zamknąć niektóre (potrzebne) sekcje serwisu, obsługiwane są także wyrażenia regularne - możesz zamykać poszczególne strony za pomocą maski.

Najczęściej korzystam z tej instrukcji (oprócz tego, co znajduje się w pliku domyślnym):

Już jedna linia pozwala pozbyć się dużej ilości śmieci. To może być:

• strony materiałów do druku zawierają także print= lub tmpl=component w adresach URL
• linki do kanałów rss
• strony wyników wyszukiwania w witrynie
• spowoduje również zamknięcie stron paginacji
• Mogą istnieć inne opcje, w zależności od zastosowanych rozszerzeń

To, czy użyjesz tej linii, czy zablokujesz każdy typ strony z osobna, zależy od Twojego uznania, ale pamiętaj, że zbyt wiele robotów jest uważane za całkowicie zezwalające. Warto też zadbać o to, aby w tej linijce nie zapisano czegoś ważnego, np. mapy serwisu – w tym przypadku możesz napisać: Zezwól: /path_to_map

Więcej o korzystaniu z pliku robots.txt możesz przeczytać w pomocy Yandex - help.yandex.ru/webmaster/?id=996567

• 3. Atrybut rel="canonical" tagu

Użycie tego atrybutu pomoże robotowi określić, które strony powinny zostać uwzględnione w indeksie, a które nie. Jeżeli w serwisie znajdują się bardzo podobne strony (rozmyte duplikaty), różniące się jedynie np. opcjami sortowania - nowe od początku, sortowanie rosnąco, wyświetlanie po 20-30 itd., to można skorzystać ten atrybut. W takim przypadku będziesz musiał wybrać jedną stronę kanoniczną, która będzie klasyfikowana, a do reszty dodać rel = „canonical” wskazując wybraną stronę - takie dokumenty nie zostaną uwzględnione w wynikach wyszukiwania, robot będzie wiedział, że są nie muszą być uwzględniane w indeksie.

Aby uzyskać więcej informacji na temat implementacji rel="canonical" w Joomla 1.7/2.5, zobacz

• 4. Przekierowanie 301

Należy go użyć, jeśli zmieniłeś adresy stron, ale dokumenty nadal istnieją, to znaczy, że ich nie usunąłeś. W takim przypadku dla prawidłowego sklejenia zalecane jest użycie przekierowania 301 w .htaccess - wyszukiwarki będą wiedziały, że dokument został przeniesiony pod nowy adres. Metoda ta pozwala na zapisanie wskaźników serwisu – Tietz i PR.

Przekierowania 301 można również wykorzystać do łączenia duplikatów. Na przykład dobrze znanymi duplikatami strony głównej witryny w Joomla są /index.php i alias elementu menu głównego, na przykład /home lub /homepage

Sklejenie ich ze sobą jest dość proste, otwórz .htaccess i wejdź

Przekieruj 301 /index.php http://site.ru/

Możesz też zrobić przekierowanie 301 do php w pliku indeksu swojego szablonu

if($_SERVER["REQUEST_URI"] == "/index.php") (
nagłówek("Lokalizacja: /", TRUE,301);
Wyjście();
}
?>

A ja dam Ci klasyczne przekierowanie z www na bez www

Przepisz silnik włączony
PrzepiszWarunek %(HTTP_HOST) ^www.example.ru$
RewriteRule ^(.*)$ http://example.ru/$1

* example.ru zamień na nazwę swojej domeny.

• 5. Metatag robotów

Innym sposobem zapobiegania indeksowaniu duplikatów w Joomla jest użycie metatagu:

W tej chwili ta metoda jest dla Google skuteczniejsza niż zakazanie instrukcji w pliku robots.txt. Na przykład, aby zablokować indeksowanie drukowanych stron i duplikatów w?tmpl=component, możesz otworzyć plik Component.php w katalogu głównym szablonu i wprowadzić ten tag w .

Aby zamknąć strony wyników wyszukiwania w witrynie internetowej przy użyciu standardowego com_search, możesz dodać warunek do pliku Index.php szablonu

Ale najpierw musisz zdefiniować zmienną

$opcja = JRequest::getVar("opcja", null);

Nie będę się za bardzo wdawał w warunki w szablonach, nie o tym jest artykuł, mam nadzieję, że zasada jest jasna.

• 6. Usuwanie adresu URL z panelu

Innym szybkim sposobem jest ręczne usunięcie z panelu webmastera.

W przypadku Yandex musisz udać się pod adres - webmaster.yandex.ru/delurl.xml

Pozostała jeszcze jedna mało popularna metoda eliminacji duplikatów Joomla z wyników wyszukiwania, ale rozważymy ją również.

• 7. Nagłówki tagów X-Robots

Dość rzadki tytuł, częściej używany przez zagraniczne optymalizatory, działa dla Google. Niestety Yandex nie skomentował jeszcze obsługi tego nagłówka http.

HTTP/1.1 200 OK
Data: wtorek, 25 maja 2010, 21:42:43 GMT
...
Tag X-Robots: noindex
...

Jak widać, istnieje wiele sposobów na usunięcie zduplikowanych treści Joomla; powinieneś przynajmniej z grubsza zrozumieć, jak działa każdy z nich, aby wybrać najbardziej odpowiednią opcję i zastosować ją w swojej sytuacji.