认为大脑拥有表示一系列心理地图的记忆集的观点颇具诱惑力。然而，与方向和地标集相比，地图包含更多的信息。你若在朋友家，你能在地图的指引下去往杂货店；你若在图书馆，你能找到朋友的家。然而，你若在图书馆，你能弄清杂货店的方向吗？除非你有地图，否则，答案也许是“不能”。大多数情况下，有丰富城镇生活经验的人和以前研究过地图的人对这些信息都记得很牢靠。
1982年，佩里·桑代克和巴巴拉·哈耶斯·罗斯证明了人们心理地图的不准确性。他们访谈了在特大综合写字楼里工作的秘书。他们发现，刚来的秘书能准确地描述怎样从A地到B地。例如，他们对辨认从咖啡厅到计算机中心的方向没有什么困难。
然而，这些新来的秘书经常分不清从咖啡厅到计算机中心的直线方向。一般来说，只有在这个楼里工作过多年的秘书才能做到这一点。
即使对外部地图有多年经验的人也会犯错，除非地图就在他们面前。若你住在美国或者加拿大，问问自己蒙特利尔是否在西雅图的北边。若你在欧洲，问问自己伦敦是否在柏林的北方。两个问题的答案都是“不是”，但大多数人都回答“是”。加拿大在美国以北，但加拿大在美国东部的边境还在其西部边境以南。英国的大部分地方在德国的北边，但英格兰南部与德国的北部在同一纬度上。