robots.txt настройка для портала спортивных новостей

Доброго времени суток

Мне необходимо максимально правильно настроить robots.txt для моего вновь созданного портала новостей спорта

Есть опытный специалист в этом вопросе?