為迎接2020年東京奧運便利國際遊客，日本政府準備修改地圖上一些太抽象的符號，例如：象徵佛教的「卍」字，外國人經常跟納粹的「卐」字搞混，國土地理院表示，地圖符號重繪，準備先對6個問題較大的符號作修改。

日本國土地理院先前徵求專家意見，並且訪談了旅客、外國學生、外交使節等1千多人，初步擬定修改地圖符號計畫。例如：卍讓西方遊客聯想到納粹而不是寺廟，不解為何地圖上滿滿的納粹黨徽，打算以「三重塔」符號來代表佛寺。然而，有民眾認為「卍字」已是日本佛教文化的一部份，目前正進一步徵詢意見並公佈最後方案。

日本國土地理院官員中村孝之表示，目前討論修改的符號，主要是針對外語版地圖。然而，北海道文教大學傳播學專家渡邊淳認為，佛教的卍已經使用了上千年，不應去除，而是應當設法讓西方遊客瞭解它的起源和含義。有網友表示，如果恐怖份子使用「米字」做為象徵，難道英國就該換掉國旗？

另外，圓圈內寫著「H」的符號在日本表示「旅館」，容易誤認為是「停機坪」，將打算改為床上躺著一個人；「X」符號源自交叉的日本警棍，但容易被誤認成代表禁止的叉叉，將改為一名警察敬禮的圖案。為營造觀光客更方便的環境，改好的地圖版本預計在2016年3月上路。