Хорошо хоть между плюсом и фазой не измерял. Зачем такие крайности? Между нулем сети и БП может быть любое напряжение, которое называется наводкой. Применяй БП по назначению и измеряй напряжение между плюсом и минусом БП.
Так и должно быть. Блок питания гальванически развязан с сетью, то есть своей вторичной частью с ней не соприкасается. То что показывает - это незначительные утечки и наводки, которые чует высокоомный мультиметр