L'histoire du château de Nitray est assez obscure dans la mesure où aucune archive ne permet à ce jour de connaître l'histoire de sa construction. En 1453, le fief de Nitray appartenait à Jean Lopin. Selon les annales des Maires de France, celui-ci était Maire de Tours en 1475. Son fils Emery lopin (voir document ci-dessous), qui lui aussi fut Maire de Tours en 1516, était également Maître des Requêtes de la reine mère Louise de Savoie. On remarque d'ailleurs la date de 1516 sur le fronton de l'une des lucarnes. En 1531, l'édifice devient la propriété de Marie Binet, et passe ensuite entre les mains de Emery Binet, son petit-fils.
Le château de Nitray est bâti sur la rive gauche du Cher, sur la commune d'Athée-sur Cher. L'entrée au nord, flanquée de deux tours dont l'une abrite une chapelle, donne accès à une cour rectangulaire. L'aile sud, face à l'entrée et l'aile ouest, sont composées de bâtiments construits au XV ème siècle.
Le corps de logis qui constitue l'aile est la partie la plus ornée du château. Deux moulures horizontales assez typiques du début de la Renaissance bordent les allèges sur toute la longueur de la façade. Des saillies verticales (pilastres) sont ornés de motifs particuliers (disques/demi-disques et losanges/demi-losanges). Ces motifs, que l'on retrouve sur les cheminées, sont typiques du début du XVIème siècle en Touraine.