在该文件中可以使用#进行注解，具体使用方法和UNIX中的惯例一样。该文件中的记录通常以一行或多行User-agent开始，后面加上若干Disallow行,详细情况如下：
网站建站建设太原网站建设东莞网站制作南京网站建设东阳网站建设常州网站建设深圳罗湖网站建设自助建站软件网站建设工作室网站建设团队陕西网站制作旅游网站模板下载广州网页制作公司网站设计东莞自助建站软件四川网站开发网站建设加盟佛山网站建设模具网站建设营销型网站建设中山网站建设网站制作报价娱乐网站建设湖州网站设计宿迁网站建设app开发公司定制湖州网站建设深圳营销型网站建设网网站设计大企业网站建设网站制作案例