los hombres (y las mujeres) SI que lo hacen con cualquiera. El sexo es sexo, y hay que tomarlo como tal mientras no se hablen de sentimientos. Con cualquiera me refiero a una persona que le atraiga algo.
Ahora bien, si fuera solo sexo, creo que lo tendrias bastante claro... no se, yo, como mujer que aprecia el sexo por lo que es, no seria de repetir varias veces con la misma persona, si no siento nada de nada. Para un par de veces podria hacerlo con alguien solo por su aspecto, pero para mas veces, tendria que llenarme en otros sentidos: personalidad, cosas en comun de las que hablar... ya que acaba siendo algo mas que sexo, y de algo hay que hablar despues

que luego de ahi se pueda sacar una relacion estable, es otro cantar.
Lo que es obvio es que le atraes, porque seguramente tenga mas opciones para sexo que no seas tu, si no le atrayeras como minimo fisicamente.
El problema aqui no es que no sepas si te esta usando, o el hecho de que en ese caso te estes dejando usar, si no que no tienes la confianza o comunicacion suficiente con ese amigo tuyo, como para saber que esta pasando realmente entre los dos.
Deberias sentarte a hablar con el, de forma tranquila, y decirle lo que sientes y lo que supone para ti ese tipo de relacion.. si quieres o no que sea algo mas para ambos, y preguntarle directamente que siente por ti.
Si disfrutas en lo que haces, y te gusta estar asi, perfecto. No hay nada de malo y no hay abusos puesto que las ganas de hacer esas cosas son mutuas. Pero si te sientes mal por no saber que busca el, no hay nada mas facil que preguntarle.