Byth oddi ar y dyddiau y codwyd y Castell ac y bu Iarll de Grey ac Owain Glyndwr wrthi'n bygylu y mae'r Cymry a'r Saeson wedi bod yn ceisio cyd-fyw yma.