Robots txt Яндекса

Сегодня пятничным вечером, размышляя о вечном, решил заглянуть в robots.txt самого Яндекса и был немало удивлен, во-первых, его размером, во-вторых, пренебрежением стандартами составления роботса, изложенными у самого же…