La date exacte de la destruction du château n'est pas connue. Nous ne pouvons faire que des hypothèses en fonctions de dates et d'événement connus
En mai 1418, Ivry tombe aux mains des Anglais, par le Duc de Gloucester. C'est à cette époque que le château d'Ivry est détruit.
1423 : Saint-André est aux mains des Anglais. On peut supposer que le château de Saint-André à subi le même sort que celui d'Ivry. Dans la deuxième moitié du XVème siècle, il ne reste plus de château dans la région.
Saint André sous occupation anglaise
1337-1453: la Normandie est sous l'occupation anglaise. Pendant la guerre de 100 ans, Saint-André est occupé par les Anglais pendant plusieurs années. En 1450 ils sont toujours présents dans la région.
Confrérie de la charité
Créé en avril 1514 à Saint-André il existait une confrérie de la charité (voir locale de la police municipale), comme dans de nombreux diocèses de Normandie, elle avait pour but de rendre les honneurs aux défunts et l'accompagnement des familles en deuil. La confrérie des Charmons a été dissoute en 1907