User-Agent: *
Allow: /
Disallow: /*.php
Crawl-delay: 1 # задает таймаут в 1 секунды