Найден корректный robots.txt
Файл управления сканированием сайта роботами
?
Robots.txt указывает поисковым роботам, какие страницы сканировать, а какие — нет. Ошибки в файле могут случайно закрыть важные разделы от индексации.
Robots.txt настроен корректно. Размер файла: 10131 байт. Загружен за: 0сек.
Проверяемая страница не запрещена в robots.txt.
Цепочка редиректов для файла robots.txt:
http://k21.center/robots.txt
301 MovedPermanently
https://k21.center/robots.txt
200 OK
Показать содержимое robots.txt
<!DOCTYPE html>
<html lang="ru">
<head>
<meta charset="UTF-8">
<meta name="viewport" content="width=device-width, initial-scale=1.0">
<meta http-equiv="X-UA-Compatible" content="ie-edge">
<title>ЦРСК ТГУ им. Менделеева (федеральная сеть ДНК)</title>
<script src="/js/ext/tinymce/tinymce.min.js" referrerpolicy="origin"></script>
<script>tinymce.init({
selector: 'textarea',
language: 'ru',
plugins: 'print preview paste importcss searchreplace autolink autosave save directionality code visualblocks visualchars fullscreen image link media template codesample table charmap hr pagebreak nonbreaking anchor toc insertdatetime advlist lists wordcount imagetools textpattern noneditable help charmap quickbars emoticons',
menubar: 'file edit view insert format tools table help',
toolbar: 'undo redo | bold italic underline strikethrough | fontselect fontsizeselect formatselect | alignleft aligncenter alignright alignjustify | outdent indent | numlist bullist | forecolor backcolor removeformat | pagebreak | charmap emoticons | fullscreen preview save print | insertfile image media template link anchor codesample | ltr rtl',
});</script>
<link rel="stylesheet" type="text/css" href="css/bootstrap-social.css?v=">
<link rel="stylesheet" type="text/css" href="/css/bootstrap.min.css?v=bb84936d7c7700b31719a49340a42bd8">
<link rel="stylesheet" type="text/css" href="/css/bootstrap-grid.min.css?v=6ba2de34dbaa851bb52c96c7bd33352e">
<link rel="stylesheet" type="text/css" href="/css/bootstrap-reboot.min.css?v=4e559333725069a33a9d0f3387652ea5">
<link rel="stylesheet" type="text/css" href="/css/flatpickr.css?v=e37afb0c0cc6cdb578468620498203a9">
<link rel="stylesheet" type="text/css" href="/css/drag-and-drop.css?v=fd1e09945464cd9ce231c04df5183206">
<link rel="stylesheet" type="text/css" href="/css/jquery-ui.min.css?v=0b5729a931d113be34b6fac13bcf5b29">
<link rel="stylesheet" type="text/css" href="/css/jquery-ui.structure.css?v=b75d9919ded1b610c51a4727dd4b9720">
<link rel="stylesheet" type="text/css" href="/css/jquery-ui.theme.css?v=c4679db4adb3f9b8089213c6c396e2ee">
<link rel="stylesheet" type="text/css" href="/css/main.css?v=f7a78bd2a7096952c1c34298fecf9880">
<script type="text/javascript" src="/js/ext/jQuery/jquery-3.4.1.min.js?v=220afd743d9e9643852e31a135a9f3ae"></script>
<script type="text/javascript" src="/js/ext/bootstrap/bootstrap.min.js?v=fc0ae1e61d12d522d67e845f4bdebdf4"></script>
<script src="https://ajax.googleapis.com/ajax/libs/jquery/3.3.1/jquery.min.js"></script>
<script src="https://maxcdn.bootstrapcdn.com/bootstrap/4.0.0/js/bootstrap.min.js"></script>
</head>
<body>
<!--Шапка сайта-->
<nav class="navbar navbar-expand-md navbar-light bg-light sticky-top">
<div class="container-fluid">
<a href="/" class="navbar-brand"><img src="/img/logo.png"></a>
<button class="navbar-toggler" type="button" data-toggle="collapse" data-target="#navbarResponsive">
<!--data-target указывается id элемента которое должно помещено в кнопку-->
<span class="navbar-toggler-icon"></span>
</button> <!--Кнопка меню, появляется если маленький экран (например мобильные устройства)-->
<div class="collapse navbar-collapse" id="navbarResponsive">
<ul class="navbar-nav ml-auto">
<li class="nav-item">
<a href="/" class="nav-link">Главная</a>
</li>
<li class="nav-item dropdown">
<a class="nav-link dropdown-toggle" href="#" id="dropdownAbout" role="button"
data-bs-toggle="dropdown" aria-expanded="false">О ЦРСК</a>
<div class="dropdown-menu" aria-labelledby="dropdownAbout">
<a href="/about" class="dropdown-item" type="button">О ЦРСК</a>
<a href="/admissionProcedure" class="dropdown-item" type="button">Порядок зачисления</a>
</div>
</li>
<li class="nav-item dropdown">
<a class="nav-link dropdown-toggle" href="#" id="dropdownAbout" role="button"
data-bs-toggle="dropdown" aria-expanded="false">Программы</a>
<div class="dropdown-menu" aria-labelledby="dropdownAbout">
<a href="/programs/" class="dropdown-item" type="button">Мероприятия</a>
<a href="/applicationEducation/" class="dropdown-item" type="button">Подать заявку на обучение</a>
</div>
</li>
<!-- <li class="nav-item">
<a href="/questionnaire" class="nav-link">Помочь в определении программы обучения</a>
</li>-->
<li class="nav-item">
<a href="/organizationInformation" class="nav-link">Сведения об организации</a>
</li>
<li class="nav-item">
<!-- <a href="/question" class="nav-link">Задать вопрос</a>-->
</li>
<li class="nav-item">
<a href="/norm-doc-pdo/" class="nav-link">Документы ТГУ и шаблоны документов</a>
</li>
<li class="nav-item">
<a href="/contacts/" class="nav-link">Контакты</a>
</li>
</ul>
</div>
</div>
</nav>
<!--Слайдер изображений-->
<div class="carousel slide" data-ride="carousel" id="slides">
<div class="carousel-inner">
<ul class="carousel-indicators">
<li data-target="#slides" data-slide-to="0" class="active"></li>
<li data-target="#slides" data-slide-to="1"></li>
<li data-target="#slides" data-slide-to="2"></li>
</ul>
<div class="carousel-item active mobil">
<img src="/img/slider_1.jpg" >
<div class="carousel-caption" id="name">
<h1 class="display-2 padding"></h1>
<div class="padding"></div>
<div class="padding"></div>
<!-- <a href="/applicationEducation" type="button" class="btn btn-primary btn-lg btn-custom">Подать заявку</a>
<a href="/questionnaire" type="button" class="btn btn-primary btn-lg btn-custom">Помочь в определении программы обучения</a>-->
</div>
</div>
<div class="carousel-item">
<img src="/img/Детский_университет.jpg">
<div class="carousel-caption">
<h1 class="display-2">Детский университет</h1>
<!-- <a href="/applicationEducation" type="button" class="btn btn-primary btn-lg btn-custom">Подать заявку</a>
<a href="/questionnaire" type="button" class="btn btn-primary btn-lg btn-custom">Помочь в определении программы обучения</a>-->
</div>
</div>
<div class="carousel-item">
<img class="img-custom" src="/img/Малая_академия.jpg">
<div class="carousel-caption">
<h1 class="display-2">Малая академия</h1>
<!-- <a href="/applicationEducation" type="button" class="btn btn-primary btn-lg btn-custom">Подать заявку</a>
<a href="/questionnaire" type="button" class="btn btn-primary btn-lg btn-custom">Помочь в определении программы обучения</a>-->
</div>
</div>
</div>
<a class="carousel-control-prev" href="#slides" role="button" data-slide="prev">
<span class="carousel-control-prev-icon" aria-hidden="true"></span>
<span class="sr-only">Previous</span>
</a>
<a class="carousel-control-next" href="#slides" role="button" data-slide="next">
<span class="carousel-control-next-icon" aria-hidden="true"></span>
<span class="sr-only">Next</span>
</a>
</div> <div class="container-fluid padding">
<div class="row alert text-center">
<div class="col-12">
<h1 class="display-4">Ошибка 404! Запрашиваемой страницы не существует</h1>
</div>
<hr>
</div>
</div>
<footer class="container-fluid">
<div class="container -fluid">
<div class="row padding text-center">
<div class="col-12">
<h2>Наши контакты</h2>
</div>
</div>
<div class="row padding">
<div class="col-sm-6 social padding">
<a href="https://vk.com/club176037946"><i class="fab fa-vk"></i> </a>
</div>
<div class="col-sm-6 padding">
<p>Адрес: 634050, Российская Федерация, г. Томск, пр.Ленина 34а</p>
<p>Телефон: +7-962-778-4288</p>
<p>e-mail: info@k21.center</p>
</div>
</div>
<div class="row padding text-center">
<div class="col-12">
<a href="/adm">Войти</a>
</div>
</div> </div>
</footer>
</body>
<script type="text/javascript" src="/js/ext/vue/vue.min.js?v=6c81f02ad0bf8e12a66c18cab188d029"></script>
<script type="text/javascript" src="/js/ext/jQuery/jquery-ui.min.js?v=c15b1008dec3c8967ea657a7bb4baaec"></script>
<script type="text/javascript" src="/js/ext/axios/axios.min.js?v=d7a175dcf106af47e1c0f608b892a115"></script>
<script type="text/javascript" src="/js/ext/bootstrap/fontawesome.js?v=668aad8c7d9f38f93221a1dcf9f93805"></script>
<script type="text/javascript" src="/js/asset/Settings.js?v=c99e1aa2fdd80cd0e129843ca47406fa"></script>
<script type="text/javascript" src="/js/ext/flatpickr/flatpickr.min.js?v=a57d64924df739600547702d6ee8450e"></script>
<script type="text/javascript" src="/js/ext/flatpickr/ru.js?v=da9a53ed20f4befcf0245d9afb1feac3"></script>
<script type="text/javascript" src="/js/mod/student/Select_jQuery.js?v="></script>
<script type="text/javascript" src="/js/ext/lodash.min.js?v=b966383b651f746af67721cc41dc1da4"></script>
<script type="text/javascript" src="/js/lib/Ajax.js?v=500ca7b8e5494ee5f5ec2bcad0220fd0"></script>
</html>
nginx