情节：从robot.txt验证内容

Question

在我的多站点应用程序中，我需要为每个站点提供一个robot.txt文件。此实现如下：

1-在开始页面中包含类型TextArea的RobotsContent属性。

2-添加了下面给出的操作器，并使用处理程序的Web配置条目。

public void ProcessRequest(HttpContext context)
        {
            var uri = context.Request.Url;

            var currentSite = _siteDefinitionRepository.List().FirstOrDefault(siteDefinition => siteDefinition.Hosts.Any(hostDefinition => hostDefinition.Authority.Hostname.Equals(uri.Host)));
            if (currentSite != null)
            {
                var startPage = _contentLoader.Get<StartPage>(currentSite.StartPage);

                var robotsContentProperty = startPage.RobotsContent;

                // Generate robots.txt file
                // Set the response code, content type and appropriate robots file here
                if (!string.IsNullOrEmpty(robotsContentProperty))
                {
                    context.Response.ContentType = "text/plain";
                    context.Response.Write(robotsContentProperty);
                    context.Response.StatusCode = 200;
                    context.Response.End();
                }
            }
        }

我知道有一些Nuget软件包可用于处理robot.txt，但出于某些原因＆amp;需要对此进行更多控制，我创建了一个自定义。上述工作原状。

refeReing https://developers.google.com/search/search/docs /高级/机器人/create-robots-txt

它提到规则案例敏感，有组织（用户代理，允许，禁止，禁止），指令（用户代理，允许，禁止，禁止）需要。所有这些规则都适当＆amp;这是一个免费的文本方面，我可以在此内添加任何随机的东西。因此，我可以对此进行任何验证吗？在线验证可以避免，但是在发布文本时，有什么方法可以验证文本。

Answer 1

您可以在robotscontent 属性上实现Episerver验证属性。

using EpiServer.Validation
public class RobotTxtValidatorAttribute : IValidate<StartPage>
{
    public IEnumerable<ValidationError> Validate(StartPage startPage)
    {
        // Validate the property value here, i.e. by using an HttpClient to use the online validation that you mentioned.
    }
}

public class StartPage
{
    [RobotTxtValidator]
    public string RobotsContent { get; set; }
}

如果使用在线验证器不是一个选项，则可以通过validate属性实现方法中的正则表达式来处理。