Tú lo has dicho: el problema es que si la cosa sale mal, puede ser un infierno tener que estar viéndola a diario. No podrías cortar el contacto aunque quisieras.
Puede ser aceptable para una persona que no se relaciona con nadie fuera del trabajo y no tiene otro sitio donde conocer gente. Pero si tú no tienes problemas en ese aspecto, yo no me metería en ese jardín.
Si te decides a probar, una forma podía ser intentar quedar con ella fuera del trabajo: un café, unas cañas, una peli... Podía ser un punto de partida