Então, eu tenho uma dúvida, acontece que não sinto nada ao tomar leite, tanto o integral, como o sem

Então, eu tenho uma dúvida, acontece que não sinto nada ao tomar leite, tanto o integral, como o semi e totalmente desnatado. A situação muda totalmente quando consumo alimentos com creme de leite, doce de leite ou alguns tipos de queijo (não todos). É de quase imediato os desconfortos intestinais, até mesmo diarreia. Até onde sei não sou intolerante a lactose, mas se fosse, não teria que acontecer com tudo que contém leite?
Gostaria de alguma orientação, qual especialista consultar.