出于各种原因，您可能希望创建robots.txt文件，或者您可能需要ads.txt文件。
对于robots.txt文件，这可能是因为您希望通过搜索引擎来阻止某些页面的索引，甚至可以完全阻止搜索引擎，其中包括许多其他原因。但是你知道你可以用页面申请做到这一点吗？
创建Robots.txt或Ads.txt文件，其中包含页面应用程序如果您无法通过FTP访问服务器，例如云平台，并且还可以为您提供快速位置，而无需需要直接访问该文件。
为了为站点创建robots.txt文件，您需要在您的机场核心计划
页面 - >页面管理 - >页面
当创建一个新页面时，选择“Manual HTML”选项，这将允许您在代码中手动创建页面。创建时使用'robots.txt'或'ads.txt'作为页面和文件名
robots . txt的例子
重要的是要注意到我们有去掉的时候“使用套件HTML包装器”选项。这样做是为了让我们直接在页面上创建文本供搜索引擎使用，而不是用来自站点其余部分的包装器包围。另外，确保它没有放在另一个文件夹中，而是放在页面应用程序的根目录中。
将内容添加到robots.txt文件，然后像添加您需要的内容选项卡一样简单。在这里，我添加了一个简单的条目来告诉Googlebot不索引我的网站。
在ADS.txt文件上，粘贴到您的广告提供商提供的代码中。
robots.txt条目
保存时，必须确保您为客人提供允许查看该页面，否则搜索引擎机器人将无法查看您到位的内容/规则。保存后，您将看到robots.txt文件可从yoursiteurlerhere / index.php获取
报告指南