Allerdings waren Berberaffen früher auch in Süd- und Mitteleuropa heimisch, die Affen von Gibraltar könnten also auch von europäischen Vorfahren abstammen. Eine Legende besagt, dass die britische Herrschaft in Gibraltar beendet sei, sobald der letzte Affe den Felsen verlassen hätte. Hintergrund dieser Legende ist eine Geschichte aus der Zeit der Belagerung Gibraltars von 1779 bis 1783: Damals sollen die Engländer von den Tieren vor einem Nachtangriff der Spanier und Franzosen gewarnt worden sein. Der britische Premierminister Winston Churchill ließ Berberaffen aus Marokko importieren, um den vermutlich wegen Inzucht kränkelnden Affenstamm wieder zu stärken, und hatte damit Erfolg.