Как найти спрятанный контент на сайте?
Я совсем не специалист, но надеюсь, что здесь мне смогут помочь. Прошу прощения, если вопрос «мимо».
Как можно посмотреть все, в том числе и скрытые ссылки на чужом вебсайте и конкретно на одной странице? Есть полученный случайно доступ к некоторым ссылкам со спрятанным контентом, который не отображается ни на странице сайта, ни в поиске по сайту, ни в гугл поиске по содержимому сайту, но прямой доступ по ссылке нет, а в каталоге, в котором эта ссылка должна быть, ее не видно. Хотелось бы посмотреть все скрытые ссылки, но не получается, все сервисы выдают только открытый контент.
- Вопрос задан более двух лет назад
- 8072 просмотра
Простой 1 комментарий
- Вконтакте
Смотря как и чем » спрятанный»
для ламеров, юзеров и прочих начинающих халявщиков есть несколько (по степени трудоёмкости) вариантов
1 — синтаксис/операторы запроса в поисковой системе
в поисковой строке набрать по следующему шаблону » [содержимое][пробел]site:[адрес домена/сайта]
*пример поиска слова «скидка» по сайту(корневому домену) site.ru — «скидка site:site.ru» данный синтаксис просканирует доступные страницы для просмотра и покажет все страницы в которых присутствует слово «скидка»
*пример поиска файлов с любым названием но только с расширением pdf — «.pdf site:site.ru» как вариант *.pdf всё зависит от конкретной поисковой системы. Как следствие можно играться — «название.» Соответственно будет искать файл с любым расширением но с названием название. так же есть синтаксис который позволяет искать как в названии так и в расширении файла часть этого названия/расширения.
2 — Специализированные программы закачки сайта полностью
так как я понятия не имею о вашей платформе искать вам нужно такими запросами — «site download», «site sucker» site как вариант заменить web
3 — Ну и как тут уже писали ранее, зайти в исходный код страницы, что зависит как от платформы/ОС так и от конкретного браузера.
В принципе если файл вообще существует а не редирект этого файла на каком то ресурсе, файл достать всегда можно. Однако на всякую хитрожо..ую хитрость найдутся методы защиты. Делайте собственный уникальный контент, ибо за кражу, плагиат и копипаст, по рукам будут давать всё чаще и чаще, и просто жалобой уже не отделаетесь.
RTFM. кибер сопляки. RTFM
Халява переоценённый и насквозь утопичный фактор. Так или иначе платить придётся.
Как найти и удалить скрытые ссылки в шаблонах cms-систем
Найти скрытые ссылки – это первоочередная задача любого проекта для которого используются сторонние шаблоны cms-систем и любые другие html-шаблоны.
С точки зрения поисковой оптимизации, наличие внешних не только скрытых ссылок в шаблоне сайта, отрицательно сказываются на развитии вашего проекта, но благоприятно влияют на сайт который указан в этих ссылках.
Через сторонние ссылки, которые у вас будут указаны в шаблоне, поисковые системы могут существенно понизить ваш сайт в поисковой выдаче. И с большей долей вероятности такие сайты, на которых обнаруживаются скрытые ссылки, попадают под санкции поисковых систем.
Чем больше внешних ссылок на сайт, тем лучше для определения ранжирования сайта в поисковых системах. Это одна из основных причин размещения скрытых ссылок в шаблонах популярных cms-систем.
В этом видео я расскажу не только о том как найти скрытые ссылки, но и как сделать скрытую ссылку, как посмотреть скрытую ссылку с помощью сервиса и приложения, а так же как удалить скрытую ссылку.
Теперь по порядку.
Как найти скрытые ссылки
Для поиска воспользуемся одним из популярных сервисов validator.org. Отличная возможность без всяких регистраций, в режиме реального времени, быстро проверить скрытые ссылки в шаблоне.
https://validator.w3.org/checklink.
Данный валидатор поможет найти все видимые и невидимые ссылки. Работает просто, добавляем адрес сайта в поле address и нажимаем кнопку Check. Время проверки зависит от объема информации. Пока нет необходимости разбираться со всеми возможностями сервиса, а нас главным образом интересует информация в конце страницы в поле List of redirects.
Для любого автора проекта такая ссылка сразу бросится в глаза и в случае, когда нет опыта определить, всегда можно понять по внешнему адресу, перейдя по нему, либо по длине самой ссылке. На скриншоте видно такую ссылку, она отличается от всех остальных.
Как удалить видимые и скрытые ссылки
В большинстве случаев главным местом для размещения скрытых ссылок является индексный файл (index.html и index.php) шаблона joomla, wordpress, либо других cms-систем. Хорошо если мы видим стороннюю ссылку, в этом случае у нас есть возможность сократить время на принятие мер.
Найти нужный блок в шаблоне можно с помощью приложения firebug для браузера mozilla firefox и в нем же можно понять как формируется сам блок или отдельно взятая ссылка. Прежде чем редактировать шаблон, необходимо сделать резервную копию сайта или отдельно взятого шаблона.
Все дело в том, что некоторые ссылки нельзя взять просто так и удалить, можно повредить работоспособность всего сайта, или только индексную страницу шаблона. Существует не мало возможностей по “закреплению” ссылок или целых блоков, с помощью web-программирования для того, чтобы нельзя было их удалить.
В первом случае все достаточно просто. Находим блок по идентификатору или классу в шаблоне и удаляем. Но что делать если ссылку удалить нельзя? Можно скрыть ссылку в css-стилях.
В этом случае, с помощью того же приложения firebug, необходимо найти стили видимой или скрытой ссылки, или блока в котором она находится и прописать дополнительное свойство (visibility: hidden;). Данный параметр просто спрячет видимую ссылку.
Можно найти скрытые ссылки и с помощью разных программ и расширений которых достаточно много. В одном из своих видео уроков, ошибка протокола https в wordpress, я рассказывал об одной такой программе Screaming Frog SEO Spider.
Удалить скрытые ссылки я все же советую вручную, без использования программ. Если скрытые ссылки добавлены без возможности удаления, т.есть, намертво, программа может все удалить и потом трудно будет разобраться где и как формировались скрытые ссылки.
В случае обнаружения скрытой ссылки в шаблоне и при невозможности удаления ее, лучше не используйте такие шаблоны, а авторов или адрес ресурсов заносите в черный список.
Как сделать скрытую ссылку
Одним из способов сделать скрытую ссылку на сайте-это добавить в css-стили или непосредственно в стили самой ссылки следующее свойство (z-index:-999px;). Отрицательное значение может быть любым, главное чтобы ссылка находилась за пределами границ самого шаблона, как бы в стороне или за ним.
Вот здесь конечно, никто ее не увидит, но поисковые роботы ее индексируют и воспринимают как внешнюю ссылку ведущую например на сайт производителя шаблона (в лучшем случае), а в худшем-на варезный или порно-сайт с кишащими там вирусами.
Ну а после посещения таких сайтов обычно можно увидеть на весь экран своего компьютера огромную “мартышку” или еще чего.
Видео урок найти скрытые ссылки
Если статья и видео оказались полезными для вас, оставляйте комментарии или отзывы.
Доступно только для пользователей (как получить ссылку на скачивание файлов без регистрации)
Часто можно встретить надпись на разных сайтах «Доступно только для пользователей». Значит. чтобы увидеть ссылку на скачивание файла, необходимо зарегистрироваться. Но иногда (не всегда!) можно легко обойти это и получит ссылки безо всякой регистрации.
Получаем ссылку без регистрации
Для получения ссылки нам нужно увидеть HTML-код веб-страницы. Для этого кликаем правой кнопкой мыши на странице и выбираем: «Исходный код» (Opera), «Просмотр исходного кода страницы» (Mozilla Firefox), «Просмотр HTML-кода» (Internet Explorer), «Просмотреть источник страницы» (Google Chrome, которым я с переменным успехом пользовался несколько днея назад). Не отвечаю за абсолютную правильность, т.к. у меня три из четырех браузеров на украинском.
Внимание! Для просмотра HTML-кода можно просто нажать комбинацию клавиш Ctrl+U во всех браузерах.
Далее необходимо подключить поиск: в Opera — клик правой кнопкой мыши > «Создать поиск». Комбинация клавиш для всех браузеров: Ctrl+F. Искать мы будем слова, которые написаны на странице рядом с надписью «Доступно только…». Я выбрал «Медведев и Путин».
На странице может встретиться несколько таких надписей, но (домашнее задание!) несложно определить искомую.
Сразу за ней будет идти знакомая надпись про «Доступно…»
Лирическое отступление: самые сообразительные спросят, а почему бы сразу не искать именно этот текст, «Доступно только для пользователей»? Отвечаю: этот текст, как правило, скрытый, и ваш браузер его не найдет. Хотите — проверьте! (Скамейка окрашена)
Следом за надписью про доступ можно увидеть ссылки на файлообменники: в данном случае это — DepositFiles и LetItBe. Вот они-то нам и нужны.
Выделим и скопируем (Ctrl+C), например, ссылку на депозитфайлз…
Откроем новую вкладку (Ctrl+T) и вставим ссылку в адресную строку (Ctrl+V). Нажимаем Enter и нашему взору открывается нужная страница для скачивания файлов.
Аналогично происходит и со ссылкой на летитбит. Удачи!
Вечно ваш, дядя Шурик.
Все мои подобные посты — с тегом «HTML»
P.S. Переходы в мой дневник по поисковым фразам сегодня радуют!
Если вы нашли ошибку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.
Как проверить и удалить скрытые внешние ссылки
Здравствуйте, уважаемые друзья. Тема сегодняшней статьи: Внешние ссылки. Мы разберёмся, что такое внешние ссылки, и какие подводные камни подстерегают начинающих сайтостроителей и не только. Сегодня в Интернете каждый день регистрируются и создаются десятки тысяч сайтов и блогов. И это только в русскоязычном сегменте. Создать свой сайт сегодня не составит труда ни школьнику, ни пенсионеру. И это благодаря тому, что появилось много систем управления контентом (CMS), различного рода конструкторов, бесплатных шаблонов и множества обучающих материалов.
Но из такого множества, 90 % так и не увидят своих целевых посетителей и клиентов. И причин для этого много, ведь в продвижении сайтов не бывает мелочей. Именно мелочи и играют ключевую роль в продвижении.
А сейчас я расскажу, где может быть такая мелочь, о которой даже и не подозревают новички. А если и знают, то либо не могут сами решить эту задачу, либо не придают ей должного значения.
Так вот, как известно каждая страница сайта имеет свой статический вес, а внешние и внутренние ссылки передают часть этого статического веса страницам, на которые они ведут. Тем самым уменьшая вес Вашей страницы. И в результате, это печально сказывается при поисковом ранжировании.
Но бояться нет причин, эту ситуацию всегда можно подправить и со временем ваш сайт наберёт вес в глазах поисковых систем.
Как найти внешние ссылки
Здесь нужно понимать, что абсолютно все внешние ссылки закрывать не обязательно. Главное закрыть ссылки с главной страницы вашего сайта. А также нужно понимать, что ссылки можно закрыть, а можно удалить. То есть следует понимать, какие ссылки следует оставить, а какие лучше убрать.
Для начала разберёмся, где наиболее часто встречаются внешние ссылки. В качестве примера будем рассматривать главную страницу (так как принцип построения шаблона у всех одинаков).
Как правило, внешние ссылки присутствуют в подвале сайта (footer), это могут быть различные счётчики, ссылки на разработчиков и так далее. А на бесплатных шаблонах WordPress, как правило, в подвале скрыты кодированные внешние ссылки. Но об этом чуть позже.
Также внешние ссылки присутствуют во всех баннерах, блоке «новые комментарии», а также в анонсах статей, расположенных на главной странице.
А ссылки в комментариях и СПАМ вообще могут нанести существенный вред вашему сайту.
Для облегчения визуального обнаружения внешних ссылок советую установить расширение для браузера RDS bar, с помощью которого вы влёт будете видеть, что за ссылка. Это лишь одно из множества достоинств этого расширения.
Так выглядят закрытые и открытые внешние ссылки, если смотреть через RDSbar.
Закрытые ссылки, обведены чёрным пунктиром, или зачёркнуты, открытые обведены красным пунктиром.
Но ссылки бывают и скрытые, поэтому для того чтобы узнать точное количество внешних ссылок с главной страницы сайта нужно воспользоваться специальными онлайн-сервисами: pr-cy.ru или dinews.ru.
Как видно на скриншотах, с главной страницы моего блога открыта всего одна ссылка. И то это сделано намеренно, это необходимо для подтверждения авторства в Гугл. А всего внешних ссылок 11, и это те ссылки, которые мне нужны (ссылки на мои странички в социальных сетях, счётчики).
Теперь, когда известны способы поиска внешних ссылок и где их найти, можно переходить к следующему шагу.
Поиск внешних ссылок в исходном коде
После того, как вы нашли сами ссылки и знаете абсолютный URL, нужно найти эту ссылку в исходном коде Вашего шаблона. Это хорошо, когда Вы видите, где эта ссылка, ну вроде подвала или сайтбара. А если ссылку не видно, поможет поиск в исходном коде.
Для вызова исходного кода нажимаем комбинацию клавиш CTRL+U
Далее вызываем поисковую форму CTRL+F
Вводим адрес внешней ссылки и нажимаем клавишу Enter
Когда внешняя ссылка найдена в исходном коде, присмотритесь и определите в каком блоке шаблона она размещена. На указанном выше скриншоте, если посмотреть внимательно, видно, что ссылка находится в блоке (footer). То есть это счётчик Яндекс.Метрики в подвале моего блога.
Вот таким вот образом и осуществляется поиск в исходном коде.
Как закрыть внешние ссылки
Прежде всего, будем закрывать внешние ссылки, которые по определению нужны для вас. То есть те ссылки, без которых обойтись нельзя, но можно закрыть от поисковых роботов. И хотя алгоритмы работы поисковых систем постоянно меняются, и поисковые системы сегодня учитывают и закрытые ссылки, тем не менее, частичку статического веса Вы сумеете сохранить.
Итак, для закрытия ссылок используются:
тег <noindex> — закрывает текст от индексации
атрибут тега ссылки rel=»nofollow» – сообщение роботу не переходить по ссылке
Теперь можно добавить эти коды к внешним ссылкам. По описанному выше примеру ищем расположение внешней ссылке в исходном коде шаблона.
А затем переходим в панель администратора WordPress в раздел «Внешний вид» — «Редактор» в файл, отвечающий за соответствующий блок в шаблоне.
Для поиска ссылки, можно использовать всё тот же поиск CTRL+F. Найдя ссылку добавляем атрибут rel=»nofollow»
Пример закрытия внешней ссылки:
Как удалить скрытые внешние ссылки в шаблоне WordPress
Зачастую при создании сайта или блога на системах управления контентом, в том числе и WordPress. Используются бесплатные шаблоны (темы оформления). Но вот в этих самых бесплатных шаблонах есть те самые скрытые внешние ссылки. Не во всех, но во многих.
Удаление или сокрытие таких ссылок, приводит к нарушению работы сайта. А за частую и полному параличу сайта. Ну что ж это за работа, когда шаблон не загружается и браузер отображает только квадрат Малевича.
Поэтому с такими ссылками нужно быть крайне осторожным. И если у Вас нет опыта работы с исходным кодом, то лучше поискать другую тему. Без внешних ссылок. Или же доверить это дело фрилансерам.
Ну а если Вы всё же решили попробовать, тогда обязательно сделайте резервную копию и можно приступать.
В качестве примера будем рассматривать удаление скрытых внешних ссылок из шаблона на тестовом домене. Это лишь один отдельный случай, с другими шаблонами будет проще, а с какими то сложнее. Пример лишь показывает один из принципов защиты скрытых внешних ссылок и как эту защиту обойти.
1. Проверяем шаблон на наличие внешних ссылок по выше описанным примерам.
Как видите, всего 15 внешних ссылок. Часть из которых ведёт на страницы в социальных сетях, а часть на хостинг, темы и предложения создать сайт бесплатно.
2. Большая часть этих ссылок находится в подвале. Следовательно, переходим в панель администратора WordPress в раздел «Внешний вид» — «Редактор» и открываем файл footer.php.
На скриншоте показан код, отвечающий за вывод скрытых внешних ссылок.
Где в комментариях предупреждают о последствиях. То есть если сейчас удалить или подправить код, — сайт перестанет работать.
Также в файле index.php присутствует блок с дублирующими ссылками, которые смещены на 1970 пикселей. Это чтобы видно не было.
Нарушив условие в этом файле, сайт также перестанет работать.
3. А учитывая тот факт, что WordPress работает на языке РНР, значит есть управляющие файлы, в которых прописаны все условия. И если условие перестанет выполняться, последует ошибка и сайт перестанет работать.
Так вот, файл, отвечающий за функционал, называется functions.php. В этом файле, главное знать, что искать.
А искать нужно фрагмент из вышеприведённого кода « wordpress_pf », который расположен в файле footer.php.
Где нужно удалить переменную и условие с этой переменной. После чего можно удалять указанные фрагменты кода в файлах footer.php и index.php.
Так вы удаляете скрытые внешние ссылки, и сайт продолжает работать без проблем.
Ну, вот друзья, на этом тему считаю раскрытой. Если будут вопросы, пишите в комментариях, буду рад пообщаться. Заходите в гости, будет много интересного. Желаю Вам удачи!