Найден корректный robots.txt
Файл управления сканированием сайта роботами
?
Robots.txt указывает поисковым роботам, какие страницы сканировать, а какие — нет. Ошибки в файле могут случайно закрыть важные разделы от индексации.
Кол-во редиректов для файла robots.txt 4 слишком большое! Это может вызывать затруднение при индексации поисковыми роботами!
Проверяемая страница не запрещена в robots.txt.
Цепочка редиректов для файла robots.txt:
http://bgbl.de/robots.txt
301 MovedPermanently
https://bgbl.de/robots.txt
302 Found
http://www.bgbl.de/404.html
301 MovedPermanently
https://www.bgbl.de/404.html
200 OK
Показать содержимое robots.txt
<!DOCTYPE html SYSTEM "about:legacy-compat">
<html xmlns:xalan="http://xml.apache.org/xalan" class="dj_gecko dj_ff114 dj_contentbox"><head><meta content="text/html; charset=UTF-8" http-equiv="content-type"><!--generated from xsl generated by 'xaver_aft.sys' Development Version !DO NOT DISTRIBUTE! ($Revision: 1.125 $)--><style type="text/css">@import "/xaver/bgbl/extern/dojoxaver/xaver/themes/base/base.css?cb=20210101";</style><style type="text/css">@import "/xaver/bgbl/extern/layout.css?cb=20210101";</style><script type="text/javascript" src="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/dojo.js" djconfig="parseOnLoad:true,isWebXaver:true,locale:'de'"></script><script type="text/javascript" src="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/bgbl_de.js"></script><script type="text/javascript" src="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/xaver.js"></script><script type="text/javascript">
dojo.registerModulePath("xaver", "../xaver");
dojo.require("xaver.globals");
dojo.require("xaver.Synchronized");
dojo.require("xaver.component.Session");
dojo.require("xaver.component.Runtime");
dojo.require("dijit.DialogUnderlay");
dojo.require("xaver.component.BrowserHistory");
</script><script type="text/javascript">
var oDialogUnderlay = null;
function xaver_aft_go()
{
if (window.onXaverGo) window.onXaverGo();
xaver.Synchronized.clean_sync("/xaver/globals", "ready");
console.info("go");
dojo.publish("/xaver/globals_async", ["go",""]);
if (oDialogUnderlay) {
oDialogUnderlay.hide();
};
}
function xaver_aft_ready()
{
if (window.onXaverReady) window.onXaverReady();
xaver.Synchronized.clean_sync("/xaver/globals", "load");
console.info("start ready");
xaver.Synchronized.publish_sync("/xaver/globals", "ready", null, xaver_aft_go);
}
function xaver_aft_load()
{
if (window.onXaverLoad) window.onXaverLoad();
xaver.Synchronized.clean_sync("/xaver/globals", "startup");
console.info("start load");
xaver.Synchronized.publish_sync("/xaver/globals", "load", null, xaver_aft_ready);
}
function xaver_aft_startup()
{
if (window.onXaverStartup) window.onXaverStartup();
xaver.Synchronized.clean_sync("/xaver/globals", "init");
console.info("start startup");
xaver.Synchronized.publish_sync("/xaver/globals", "startup", null, xaver_aft_load);
}
function xaver_aft_init()
{
if (window.onXaverInit) window.onXaverInit();
oDialogUnderlay = new dijit.DialogUnderlay({ 'class': 'loading' });
oDialogUnderlay.show();
console.info("start init");
xaver.Synchronized.publish_sync("/xaver/globals", "init",null,xaver_aft_startup);
}
dojo.addOnLoad(xaver_aft_init);
</script><script type="text/javascript">var dtXavRevision='20210101';</script><link type="image/x-icon" rel="shortcut icon" href="https://www.bgbl.de/xaver/bgbl/extern/img/favicon.ico?cb=20210101"><title>Bundesgesetzblatt BGBl. Online-Archiv 1949 - 2022 | Bundesanzeiger Verlag</title><meta content="width=device-width, initial-scale=1" name="viewport"><meta content="Zugriff auf das komplette Online-Archiv 1949 - 2022 des Bundesgesetzblattes Teil I und Teil II sowie auf die Fundstellennachweise A (FNA) und Fundstellennachweise B (FNB)" name="description"><meta content="Bundesgesetzblatt, öffentliches Online-Archiv 1949 - 2022, Gesetze, Verordnungen, Informationen, BGBl." name="keywords"><meta content="Bundesanzeiger Verlag GmbH" name="author"><meta content="Bundesanzeiger Verlag GmbH" name="publisher"><meta content="2022, Bundesanzeiger Verlag GmbH" name="copyright"><script type="text/javascript" src="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/start.js"></script><script type="text/javascript" src="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/tools.js"></script><script type="text/javascript" src="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/gui.js"></script><script type="text/javascript" src="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/gnr.js"></script><script type="text/javascript" src="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/bgbl.js"></script><script type="text/javascript">
var nFontSize = 13;
var nFontChange = 0;
var bDontShowText = false;
var oMediaLink = '<xaver:media-link xmlns:xaver="http://www.doctronic.de/Xaver/1.0" genhref=""></xaver:media-link>';
try
{
nFontSize = 13;
}
catch(ex) {};
nPrintMarks = 0;
try
{
nPrintMarks = nPrintMarks = 0;
}
catch (ex) {;};
var oURI = "bgbl";
var oBasepath = location.pathname.substr(0,location.pathname.search(/(bib|start)\.xav$/));
var QMask = { "bgbl": true, "fundstellen": true };
</script><link media="all" type="text/css" rel="stylesheet" href="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/default.css"></head><body class="base base origin smartphoneLeft smartphoneTOC originBGBL" id="dtGen_78"><div class="greyframe" style="height:100%;"><div data-dojo-attach-point="containerNode" class="dijitBorderContainerNoGutter dijitContainer manager dijitLayoutContainer" id="MainLayoutManager" widgetid="MainLayoutManager" style="padding: 0px;">
<!-- #### TOP #### --><div region="top" data-dojo-type="xaver/layout/ContentPane" id="TopPane" class="dijitContentPane dijitBorderContainerNoGutter-child dijitBorderContainerNoGutter-dijitContentPane dijitBorderContainerNoGutterPane dijitAlignTop" widgetid="TopPane" style="left: 0px; top: 0px; position: absolute; width: 100%;"><div class="productColorBackground" id="headContainer"><div id="siteNavi"></div><div id="logo"><a target="new" href="http://www.bundesanzeiger-verlag.de/"><img alt="Bundesanzeiger Verlag" src="Bundesgesetzblatt%20BGBl.%20Online-Archiv%201949%20-%202022%20Bundesanzeiger%20Verlag-Dateien/bundesanzeiger.svg"></a></div><div id="serviceNavi"><ul><li><a href="https://www.bgbl.de" onfocus="this.blur()">Startseite</a></li></ul></div><div id="bgbl_infotext" style="height:90px;"><p><b>Bundesgesetzblatt-Archiv der von 1949 bis 2022 erschienenen Ausgaben</b></p><p>In den Jahren 1949 bis 2022 erfolgte die rechtswirksame Verkündung von Rechtsnormen in den gedruckten Bundesgesetzblättern.<br>
Das hier vorgehaltene frei zugängliche Archiv
beinhaltet die bis zu diesem Zeitpunkt erschienenen Gesetzblätter so,<br>
wie sie veröffentlicht wurden.<br>
Ab 1.1.2023 wurde die Verkündung im Internet unter <a target="_blank" href="https://www.recht.bund.de/">www.recht.bund.de</a> eingeführt.</p></div></div></div><!-- #### TOP END #### -->
<div data-dojo-attach-point="containerNode" class="dijitBorderContainerNoGutter dijitContainer manager pane contentregion dijitBorderContainerNoGutter-child dijitBorderContainerNoGutter-dijitBorderContainerNoGutter dijitBorderContainerNoGutterPane dijitAlignCenter dijitLayoutContainer" id="CenterPane" widgetid="CenterPane" style="top: 151px; position: absolute; padding: 12px;">
<h1>Die von Ihnen aufgerufene Seite konnte nicht gefunden werden.</h1>
<p>Entweder haben Sie eine falsche oder veraltete URL aufgerufen oder aber wir haben die betreffende Seite archiviert, verschoben oder umbenannt.</p>
</div>
<!-- #### FOOTER #### --><div data-dojo-type="xaver/layout/ContentPane" region="bottom" id="footer" class="dijitContentPane dijitBorderContainerNoGutter-child dijitBorderContainerNoGutter-dijitContentPane dijitBorderContainerNoGutterPane dijitAlignBottom" widgetid="footer" style="left: 0px; bottom: 0px; position: absolute; width: 100%;"><span title="© Bundesanzeiger Verlag GmbH">© Bundesanzeiger Verlag GmbH</span> • <span title="Telefon: 0221-97668-282">Telefon: 0221-97668-282</span> • <span title="E-Mail: bgbl@bundesanzeiger.de">E-Mail: <a href="mailto:bgbl@bundesanzeiger.de?subject=BGBl-Archiv">bgbl@bundesanzeiger.de</a></span></div><!-- #### FOOTER END #### --></div></div></body></html>
PrestaShop
Apache