Llegamos a los Baños tomando el antiguo camino que une Castaras con Notaez llegar hasta el cementerio y desde allí bajar al fondo del valle. Debemos atravesar el frondoso Barranco de la Alberquilla, donde pasaremos sus aguas sobre un escondido y pequeño puente, construido con sillares de roca caliza, formando un solo arco. Mientras caminamos por el barranco, veremos cuidadas huertas y las acequias que las riegan, y podremos disfrutar de una frondosa y variada vegetación de ribera, destacando importantes ejemplares de álamos y fresnos principalmente. Pasados 20 minutos desde que salimos de Cástaras, llegamos al cementerio, el cual dejamos a nuestra derecha para tomar una carretera que nos conducirá hasta el balneario.
El edificio del balneario es de planta poligonal y doble altura, con cubierta de teja. Está construido en mampostería con enfoscado y múltiples vanos, que alojan ventanas y puertas. En su interior hay habitaciones comunicadas entre sí, además de abrevaderos, graneros y estancias para el hospedaje de los visitantes.
Unos metros por debajo del balneario podemos ver el nacimiento de sus aguas ferruginosas, que corren entre el denso bosque de galería-ribera, donde predominan los álamos. Los Baños del Piojo, son un antiguo balneario abandonado que en la actualidad se encuentran en proceso de rehabilitación.