高輪の大木戸は、東海道からの江戸市中への入口でした。宝永7年（1710）に街道の左右に石垣が築かれ、高札場（こうさつば）がありました。石垣の後ろは海です。東海道を西へ旅する人を見送る人々がここで宴会を催すなど、常に繁昌していました。伊能忠敬はここを基点として全国の測量を行ったといわれています。