Может. Плесень выделяет тяжелые токсины. Причем имей в виду - если на хлебе сверху появилась плесень, то обрезать ее бесполезно. Гифы плесени уже прошли по всему хлебу.
Целый хлеб - это как? Целиком буханку заглотили? Или все же на куски резали? Если последнее - то явно в глаза долбитесь, раз плесени не увидели. Ничего с вами не будет, посидите на фаянсовом друге пару раз.