Как научиться разбираться в музыке по - настоящему, если не являешься ни музыкантом, ни музыкальным критиком?

Вопрос сложный.
Я не совсем понимаю, что ты имеешь в виду под "разбираться по-настоящему".

Подход зависит от жанра музыки, в котором ты хочешь разбираться, потому что невозможно знать всё и сразу, а каждый жанр требует своего подхода.
Если ты хочешь понимать взаимосвязи музыкальных стилей, и почему музыканты играют именно так, как играют, то тебе придётся много слушать и читать.
Очень желательно сосредоточиться на одном стиле и некоторое время просто не слушать ничего другого.

Да, и некоторые музыкальные знания очень даже не повредят, чтобы фразы типа "миксолидийский лад" и "гармонический минор" не ставили тебя в позу медитации. И желательно хотя бы одним пальцем уметь играть на фортепиано. Или на гитаре.
1) Элементарная теория музыки - это тонкая книжечка. Выучить наизусть! ))
2) Инструментоведение, звучащий учебник - в интернете есть. Это для умения различать на слух инструменты и слышать в общем потоке музыки каждый инструмент отдельно.
3) Музыкальная литература, учебник для средних учебных заведений - для общего развития.

Подавляющее большинство музыкальных критиков с удовольствием копаются в фактографии и поражают своих читателей потоками подробностей - "кто, где, когда и с кем", но это к музыке имеет слабое отношение, это типа музыкальной жёлтой прессы.