Как сделать так чтобы обьект сталкивался но не толкал?

Unity. У моего обьекта в юнити есть RB и коллайдер и этот обьект можно двигать мышью. Если на пути между курсором и обьектом что-то находится, то обьект начинает толкать это, хотя нужно чтобы он просто уперся. Нужного мне эффекта можно было бы добиться установив массу на 0, но юнити не позволяет это сделать. Я использую rb.MovePosition() для перемещения мышью.