Найден корректный robots.txt
Файл управления сканированием сайта роботами
?
Robots.txt указывает поисковым роботам, какие страницы сканировать, а какие — нет. Ошибки в файле могут случайно закрыть важные разделы от индексации.
Кол-во редиректов для файла robots.txt 3 слишком большое! Это может вызывать затруднение при индексации поисковыми роботами!
Проверяемая страница не запрещена в robots.txt.
Цепочка редиректов для файла robots.txt:
http://urla.to/robots.txt
302 Found
https://urla.to/robots.txt
302 Found
https://urla.to/Error.aspx?error=6&link=http%3a%2f%2furla.ru%2frobots.txt
200 OK
Показать содержимое robots.txt
<!doctype html>
<html lang="ru">
<head>
<meta charset="UTF-8">
<meta http-equiv="X-UA-Compatible" content="IE=edge">
<!--meta name="viewport" content="width=device-width, initial-scale=1.0"-->
<meta name="viewport" content="width=device-width, initial-scale=1.0">
<meta name="description" content="">
<meta name="author" content="">
<meta name="copyright" content="">
<meta name="format-detection" content="telephone=no">
<title>Короткие ссылки!</title>
<!-- For third-generation iPad with high-resolution Retina display: -->
<link rel="apple-touch-icon-precomposed" sizes="144x144" href="">
<!-- For iPhone with high-resolution Retina display: -->
<link rel="apple-touch-icon-precomposed" sizes="114x114" href="">
<!-- For first- and second-generation iPad: -->
<link rel="apple-touch-icon-precomposed" sizes="72x72" href="">
<!-- For non-Retina iPhone, iPod Touch, and Android 2.1+ devices: -->
<link rel="apple-touch-icon-precomposed" sizes="57x57" href="">
<link rel="icon" href="./Content2014/img/favicon.ico" type="image/x-icon">
<!-- JS -->
<!--[if (gte IE 9)|!(IE)]><!-->
<script src="./Content2014/js/jquery-2.1.0.min.js"></script>
<script src="./Content2014/js/jgrowl.min.js"></script>
<script type="text/javascript" src="./JavaScript/MyJS.js"></script>
<!--<![endif]-->
<!--[if lte IE 8]>
<script src="./Content2014/js/jquery-1.11.0.min.js"></script>
<script>
document.createElement('header');
document.createElement('nav');
document.createElement('menu');
document.createElement('section');
document.createElement('article');
document.createElement('aside');
document.createElement('footer');
</script>
<![endif]-->
<script src="./Content2014/js/wm.js"></script>
<script src="./Content2014/js/user.block.autoload.min.js"></script>
<!-- CSS -->
<link href="./Content2014/css/reset.css" rel="stylesheet" type="text/css">
<link href="./Content2014/css/wm.css" rel="stylesheet" type="text/css">
<link href="./Content2014/css/user.block.min.css" rel="stylesheet" />
<link href="./Content2014/css/color-terracota.css" rel="stylesheet" type="text/css">
<link href="./Content2014/css/menu.css" rel="stylesheet" type="text/css" />
<link href="./Content2014/css/jgrowl.css" rel="stylesheet" />
<link href="https://assets.web.money/css/menu-autoload.css" rel="stylesheet" type="text/css">
<link href="./style/wmlink.css" rel="stylesheet" type="text/css" />
<script async src="https://assets.webmoney.ru/js/wm-ext-menu-ru-autoload.js"></script>
<script type="text/javascript">
var gl_lang = 'ru-RU';
$(document).ready(function() {
CheckFlag();
});
</script>
<script>
(function(i,s,o,g,r,a,m){i['GoogleAnalyticsObject']=r;i[r]=i[r]||function(){
(i[r].q=i[r].q||[]).push(arguments)},i[r].l=1*new Date();a=s.createElement(o),
m=s.getElementsByTagName(o)[0];a.async=1;a.src=g;m.parentNode.insertBefore(a,m)
})(window,document,'script','https://www.google-analytics.com/analytics.js','ga');
ga('create', 'UA-22501622-1', 'auto');
ga('send', 'pageview');
</script>
</head>
<!--[if lte IE 7]><body class="ie7"><![endif]-->
<!--[if IE 8]><body class="ie8"><![endif]-->
<!--[if (gte IE 9)|!(IE)]><!-->
<body>
<!--<![endif]-->
<script type="text/javascript" src="//assets.webmoney.ru/js/wm-ext-menu.js"></script>
<div class="viewport">
<header class="clearfix">
<a href="//www.webmoney.ru/" class="logo-webmoney">WebMoney</a>
<nav id="wm-ext-menu"></nav>
<div class="header-functions">
<table class="header-user">
<tr>
<td class="header-user-search">
<script type="text/javascript" src="./Content2014/js/jquery.cookie.js"></script>
<script type="text/javascript" src="./Content2014/js/search.box.js"></script>
<script language="javascript" type="text/javascript">
$(document).ready(function() { initSearch(); });
function initSearch() {
initializeSearch('#search-box', 'watermark', '#search-button', '#option-button', '#search-more', Find);
initializeOption('#option-search-info');
initializeOption('#option-search-goods');
initializeOption('#option-search-inout');
initializeOption('#option-search-wiki');
setDefaultOptionFromCookie('watermark', '#option-search-info');
}
function Find(what, where) {
/*firefox*/
var defsearch = document.getElementById("defsearch");
var wiki = document.getElementById("wiki");
var inout = document.getElementById("inout");
var goods = document.getElementById("goods");
/*firefox*/
switch (where) {
case "goods":
goods.search.value = what;
goods.submit();
break;
case "inout":
inout.name.value = what;
inout.submit();
break;
case "wiki":
wiki.query.value = what;
wiki.submit();
break;
default:
defsearch.q.value = what;
defsearch.submit();
break;
}
}
</script>
<div class="search-block">
<img alt="search options" src="./Content2014/img/icon-search-toggle-down.png" class="toggle-search" id="option-button">
<span class="icon-search" id="search-button"></span>
<input type="text" name="search" id="search-box" title="Найти информацию">
<ul class="search-more" id="search-more" style="display:none;">
<li><a href="#" id="option-search-info" input="search-box" watermark="Найти информацию" where="info" class="search-current">Найти информацию</a></li>
<li><a href="#" id="option-search-goods" input="search-box" watermark="Найти товары" where="goods">Найти товары</a></li>
<li><a href="#" id="option-search-inout" input="search-box" watermark="Найти как ввести/вывести" where="inout">Найти как ввести/вывести</a></li>
<li><a href="#" id="option-search-wiki" input="search-box" watermark="Найти информацию в Wiki" where="wiki">Найти информацию в Wiki</a></li>
</ul>
</div>
</td>
<td class="header-user-buttons" data-role='header-user-block' data-sign-on='true' data-uriservice-user-change='./login.aspx' data-uriservice-rid='0914dce1-cc75-48bf-92fb-9c5000c10bae'><a href="login.aspx" class="header-sign-in">Вход</a><a href="//start.webmoney.ru/" class="header-registration">Регистрация</a></td>
</tr>
</table>
</div>
</header>
<div class="service-block clearfix">
<div class='service-tab-active'>
<a href="default.aspx">
<img src="./Content2014/imgnew/b77368_0023_wm_link.png">
</a><a class="service-title" href="default.aspx">
<h2>
Links</h2>
</a>
</div>
<ul class="service-menu">
<li class="service-tabs clearfix">
<a href="./MyLinks.aspx">Мои ссылки</a>
</li>
<li class="service-sub-tabs clearfix">
<a href="./Default.aspx" class='service-sub-tab-active'>Главная</a>
<a href="./Bookmarklet.aspx">Bookmarklet</a>
<a href="./WebService.aspx">Веб-сервис</a>
</li>
</ul>
</div>
<div class="wrapper clearfix">
<div class="content">
<div style="vertical-align:middle; text-align:center">
<span id="ctl00_contentPlaceHolderMain_lblError" style="color: red; font-size:16px">Ссылка <b>http://urla.ru/robots.txt</b> не найдена</span>
</div>
</div>
</div>
<br/>
<br/>
<footer class="clearfix">
<div class="footer-menu">
<table>
<tr>
<td class="footer-menu-events"><a href="https://events.webmoney.ru"><i></i>Деловая сеть</a></td>
<td class="footer-menu-news"><a href="https://blog.wmtransfer.com/"><i></i>Новости</a></td>
<td class="footer-menu-developers"><a href="https://www.webmoney.ru/rus/developers/index.shtml"><i></i>Разработчикам</a></td>
</tr>
</table>
</div>
<ul class="footer-content clearfix">
<li class="footer-content-links">
<p>
<a href="//www.webmoney.ru/rus/cooperation/">сотрудничество</a>
<a href="//www.webmoney.ru/rus/support/press-service.shtml">пресс-центр</a>
<a href="//www.webmoney.ru/rus/support/tech.shtml">контакты</a>
</p>
<p>По всем вопросам обращайтесь <a href="https://support.wmtransfer.com">support.wmtransfer.com</a></p>
</li>
<li class="footer-content-coprights">
<p>Воспроизводимые на данном сайте торговые марки WEBMONEY и WEBMONEY TRANSFER используются держателями сайта с разрешения правообладателя.</p>
<p>Copyright WebMoney © 1998.</p>
<div class="lang-selector clearfix">
<div rel="toggle-actions">
<span class="lang-RU">Русский</span><div class="lang-selector-more"><ul><li><a href="?error=6&link=http%3a%2f%2furla.ru%2frobots.txt&lang=en" class="lang-UK">English</a></li></ul></div>
</div>
</div>
</li>
</ul>
<div class="wrapper clearfix">
<div id="place12" data-role="banner" data-placeid="12"></div>
<!-- For correct work of advertising add the follow script in the bottom of page -->
<script src="https://illicium.web.money/scripts/public/illicium_0_1.js" async> </script>
</div>
</footer>
<a class="scroll-to-top"></a>
</div>
<form id="wiki" action="https://wiki.webmoney.ru/wiki/search" method="get" target="_blank">
<input type="hidden" id="query" name="query">
</form>
<form id="defsearch" action="https://search.wmtransfer.com/" method="get" target="_blank">
<input type="hidden" name="q" id="keyword">
<input type="hidden" name="locale" value="ru">
</form>
<form id="goods" action="https://megastock.ru/searchres.aspx" method="get" accept-charset="windows-1251" target="_blank">
<input type="hidden" name="search" id="search">
<input type="hidden" name="lang" value="ru">
</form>
<form id="inout" action="https://geo.webmoney.ru/find/geosearchpage.aspx" method="get" accept-charset="windows-1251" target="_blank">
<input type="hidden" name="name" id="city">
<input type="hidden" name="userID" id="dir" value="0045DF2D-7BD9-44FB-B5A8-9F1E5C08DC4A">
<input type="hidden" name="lang" value="ru">
</form>
</body>
</html>
OpenResty