Почему обычно умные не ходят в спортзал ?

Лень

У умных качалка дома в подвале

Пустая трата времени для них

Потому что умная обезьянка носит нож в кармане

очки бегать мешают

Кто такой умный?

Мы вас геев не понииаем совсем

Потому что развитие и поддержание интеллекта требует очень больших усилий.
Не знаю, кого конкретно вы называете "умными", но, допустим, какому-то учёному регулярно нужно читать статьи (и писать иногда), ездить на конференции, преподавать, узнавать что-то новое в своей области.
Просто времени не остаётся часто на спорт, потому что всё время и силы идут на прокачку мозгов.