赤レンガ倉庫は、東洋で初めて築造された近代ふ頭である「新港ふ頭」に、輸出入される貨物を税関が管理する倉庫として、国（大蔵省）によって建設されたもので、耐震・耐火構造を採用した当時最新鋭の倉庫でした。創建時から戦前までは横浜税関が管理し、葉煙草、羊毛、光学機器などの輸入品を取扱っていましたが、戦時中は陸海軍の輸送司令部が管理し、戦後は米軍の港湾司令部として使用されました。