Edifício de estilo clássico erguido no século XVI, o castelo de Borey é um belo exemplo das residências senhoriais de Franche-Comté da época. Originalmente uma casa fortificada, sofreu diversas transformações, nomeadamente no século XVIII.
Atualmente propriedade privada, o castelo de Borey tem a forma de um longo edifício principal de um andar emoldurado por dois pavilhões. No centro também é visível um porte-cochere em arco semicircular. A parte posterior continha uma capela, totalmente reconstruída no século XIX na sequência de um incêndio.