Creo que el Comentario de Matthew Henry responde mejor a tu pregunta:

No es tanto un abuso del cuerpo como de alguna otra cosa, como del vino por el borracho, la comida por el glotón, etc. Tampoco da el poder del cuerpo a otra persona. Tampoco tiende tanto al reproche del cuerpo y lo hace vil. Este pecado es llamado de manera peculiar impureza, contaminación, porque ningún pecado tiene tanta turbiedad externa en él, especialmente en un cristiano. Peca contra su propio cuerpo; lo contamina, lo degrada, haciéndolo uno con el cuerpo de esa criatura vil con la que peca.

Además, el New Interpreter’s One-Volume Commentary on the Bible entra en más detalles sobre el contexto en Corinto para el escrito de Pablo:

Sobre la base de la enseñanza del AT (e.Por ejemplo, Génesis 2:24, citado en el versículo 16), reafirmada por Jesús (Marcos 10:2-12), cree que la relación sexual no es un acto aislado e intrascendente, sino que une al hombre y a la mujer en un vínculo íntimo, completo y duradero. En consecuencia, le repugna la idea de que un miembro del cuerpo de Cristo se una con el cuerpo de una prostituta. En Corinto, la mayoría de las prostitutas eran mujeres esclavas vinculadas al servicio de un templo pagano. Se pensaba comúnmente que cualquier hombre que tuviera relaciones sexuales con estas prostitutas sagradas entraba en comunión con el dios al que servían (cf. 10:18-22)

Por último, creo que Proverbios 6:32-33 lo resume muy sucintamente:

El que comete adulterio carece de sentido; el que lo hace se destruye a sí mismo. Recibirá heridas y deshonra, y su deshonra no se borrará.