Найден корректный robots.txt
Robots.txt настроен корректно. Размер файла: 2766 байт. Загружен за: 61мсек.
Проверяемая страница не запрещена в robots.txt.
Цепочка редиректов для файла robots.txt:
http://vds.timeweb.ru/robots.txt
301 Moved
https://timeweb.cloud/my/robots.txt
200 OK
Показать содержимое robots.txt
<!doctype html><html lang="ru"><head><meta charset="UTF-8"><meta name="viewport" content="width=device-width,initial-scale=1,maximum-scale=1,user-scalable=0,interactive-widget=resizes-content"><meta http-equiv="X-UA-Compatible" content="ie=edge"><meta name="description" content="Войдите в панель управления под своим логином. Быстрая авторизация для легкого администрирования облачных сервисов: серверы, VDS и VPS, DBaaS, Kubernetes."><title>Панель управления Timeweb Cloud</title><meta name="theme-color" content="#ffffff" media="(prefers-color-scheme: light)"><meta name="theme-color" content="#17212B" media="(prefers-color-scheme: dark)"><meta name="og:image" content="https://st.timeweb.com/cloud-static/og/main-nd.png"><meta name="twitter:card" property="twitter:card" content="summary_large_image"><meta name="og:image:width" content="1200"><meta name="og:image:height" content="630"><link rel="icon" href="/my/favicon.ico" sizes="any"><link rel="icon" href="/my/icon.svg" type="image/svg+xml"><link rel="apple-touch-icon" href="/my/apple-touch-icon.png"><link rel="manifest" href="/my/manifest.json"></head><body><div id="cloud"></div><script>function getCookie(needle) {
return document.cookie.split(';').map(function(cookiestring) {
cs = cookiestring.trim().split('=');
if(cs.length === 2) {
return {'name' : cs[0], 'value' : cs[1]};
} else {
return {'name' : '', 'value' : ''};
}
})
.filter(function(cookieObject) {
return (cookieObject.name === needle);
})?.[0]
}
const theme = getCookie('data-theme')
if (theme.value === 'dark') document.body.style.backgroundColor = '#17212B';</script><script defer="defer" src="/my/assets/js/runtime.74be56be2adcbb6642db.js"></script><script defer="defer" src="/my/assets/js/vendor-cloud~emoji.800e3b06b777c019b0f7.js"></script><script defer="defer" src="/my/assets/js/vendor-cloud~polyfill.2d0188e270446488ec86.js"></script><script defer="defer" src="/my/assets/js/vendor-cloud.3cccdf1c898c61352e34.js"></script><script defer="defer" src="/my/assets/js/ui-cloud.112d0615f19512b9276a.js"></script><script defer="defer" src="/my/assets/js/common-cloud.8af17e5d90382c5f4c88.js"></script><script defer="defer" src="/my/assets/js/cloud.0fbebe1a58fe0acb2521.js"></script><script defer="defer" src="/my/assets/js/emoji.ad51c64d85e11ce96060.js"></script><script defer="defer" src="/my/assets/js/vendor-polyfill.36c3dc8f727935726630.js" nomodule></script><script defer="defer" src="/my/assets/js/polyfill.615741267fe0fffd367e.js" nomodule></script></body></html>