Можно ли получить высшее образование по другой специальности(бюджет), если отчислился с 3 курса ВУЗа?

Можно, если у тебя хороший аттестат и будут ли места

На бюджет нет, так как только на одно образование можно бесплатно пойти. Если платно то сколько угодно

Можно я так делал после отчисления из колледжа и в другой поступал на бюджет

В Российской Федерации гарантируются общедоступность и бесплатность в соответствии с федеральными государственными образовательными стандартами дошкольного, начального общего, основного общего и среднего общего образования, среднего профессионального образования, а также на конкурсной основе бесплатность высшего образования, если образование данного уровня гражданин получает впервые.
Соответственно, пока не получите бесплатное первое высшее образование — можете бесконечно поступать на бюджет и отчисляться!

Можно.