User-agent: * Allow: /*.htm$ Allow: /*.html$ Allow: /*.htm Allow: /*.html Allow: /*.php Allow: /*.php$ Disallow: /cgi-bin/ Disallow: /img/