Зачем при верстке web-страниц в коде делаются отступы?

это делается для удобства редактирования текста страницы.. . автором, разумеется

Для того что бы код было удобно читать.
Есть определенные правила выработанные програмистами в течении времени. С ними можно ознакомиться почитав статьи на тему "верстка html".
Роботы поисковиков это игнорируют.

нет не столь аожно)
поисковик-никак это же машина)) да и в большей частности не сам поисковик, а работа браузера и в прочем тож никак
вопрос не втом как правильно, а как удобно-правильно люди пишут-это для удобства, так лучше глазу усваевается))

Это улучшает такой параметр, как кроссбраузерность. Некоторые браузеры (особенно - Опера и Хром) так перевернут страницу без прописанных отступов, что сразу и не поймешь, куда попал.. .

В самом коде это помогает видеть нужную строку при редактировании.

Роботам, по большому счету, все равно, как написан код - если страница загружается.

для быстрой ориентации в коде, еще и комменты добавляют, когда менять/изменять/удалять что-то будешь, то легко найти, т. е в общем случае для удобства верстальщика
роботам пофиг, единственное, что отступы в какой-то степени влияют на скорость загрузки страницы и все