老天津卫流传的一种说法：“看电影到平安，电影公司数权仙”。平安指的是平安电影公司，小白楼音乐厅的前身，能与权仙电影院相提并论，可见其在天津电影界也曾风光无限。昨天我们说了权仙电影院，今天我们就说说平安电影公司。
平安电影公司是天津第一家外国人开办的电影院。1910年，英籍印度人巴厘在万国桥（今解放桥）以南旧新华银行大楼对面修建了平安电影院，除放映影片外还兼营影片进口。1916年，他又在法租界兴建了一座新的影院（国民饭店现址），遗憾的是1919年新影院失火。
1920年期，小营门前西侧原花园地块改为私人住宅用地，建起了一座气派的洋房，其原门牌号南京路111号，后改建设路108号，1990年被拆除。这座原花园地块上的南京路111号楼的后身就是的“平安电影院”，也成为小营门的地标建筑。同时工程处拆除旧有木桥，新建钢筋混凝土桥，即“平安桥”。小营门西侧旧有的“义路金花园”，即通称的“平安公园”，在原有花圃基础上，新造了铁艺围墙，增建兰藤萝架、儿童游戏场等设施。
1922年，新平安影院在小营门建成，建筑面积1500平方米，场内设有大厅，内设包厢，有1000多个座席，这是当时天津最豪华的电影院，常放映世界一流的好莱坞大片，上座率极高。1929年年末，这里放映了有声电影，美国福克斯公司影片《歌舞升平》，这是天津第一次播放有声电影，使观众耳目一新，也为影院带来了不菲的收入。除此之外，在宣传方面，当时的管理者也是别出心裁。为了使电影更卖座，在放映第一次世界大战纪录片时，工作人员从美国军营（位于今马场道与广东路交口的天津医大河西院址）借来了铁甲车摆放在影院门口做影片的活广告，这也是天津电影界以实物当电影广告的第一次。这些已经被尘封的往事，都已经成为记录平安电影院历史的点滴。1924年，列宁逝世后的3月23日，中共天津地委领导的社会主义青年团和各界爱国青年五百余人在这里举行追悼大会，会后放映了纪录影片《列宁的葬仪》，当时所用的片名是《列宁出殡记》，共六本，这是苏联影片最早在天津放映的记录。
与此同时，电影商也看好了天津市场，到上世纪30年代，天津的电影院发展到30多座，为华北地区大城市影院数量之冠。这些影院中，大多数为华人经营，只有平安、蛱蝶、光陆、光明、天升等少数几座由外商经营。电影不仅丰富了天津人的娱乐生活，也把西方一些时尚的生活方式与观念传递给这座城市。1939年1940年，小营门东口位置，利用原山西渠氏宅邸私人花园的一部分土地建成四层现代风格的“维格多利餐厅”大楼（今起士林址），成为小白楼地区最高的建筑物。
1858年，第二次鸦片战争爆发，英、法、美、俄军舰溯海河而上，侵入天津，盘踞在三岔河口一带，并扬言进攻北京，威胁清廷。咸丰皇帝大学士桂良在海光寺与列强签订了丧权辱国的《天津条约》。针对天津城无崇山险隘可据守的弱点，1860年，僧格林沁亲王为增强天津防御外寇入侵的能力，下令围绕天津城垣挖筑护城濠墙。全长36里的壕墙，只用18天就竣工告成。壕墙四周建大小炮台12座，安放铜炮20余门，驻兵5000人，铺勇3000人，形成天津城厢之外的一道防御工事。人们把这道起防御作用的环城之“墙”称为“墙子”，把墙外挖的水沟称为“墙子河”。
濠墙的十一个门，没有名字，门都是按照大道、河流开辟的。直隶总督李鸿章重修各门，增加了三个营门，总计14个营门。门以砖石砌成，两旁有高大的砖垛，门上有石额，刻有营门名。从海河中学旁的墙子河入海河口起，沿南京路，过大营门、小营门、南营门，到西营门，到三元村越过南运河后，沿公庄的铁路路基，到北营门。在历史上，小营门的正名厚德门，也称小南门，俗称小营门。大营门最初叫做梁园营门，后被正式命名为凝晖门，但老百姓嫌它文绉绉的不好记，因与大沽南路的“小营门”相对，故称作“大营门”。
1932年，英工部局及特一区联合疏浚了从海河至海光寺间的墙子河，而填土工程也在1937年全部告竣。市政改造让一段破旧土墙展现出恬美、宁静的意境：小桥流水、野草闲花配以西方先进电气化基础设施，诸多精美绝伦的洋楼别墅建筑在墙子河两岸，墙子河区域因为有了这一座“城墙花园”而对新迁入租界的住户极具吸引力。不论中国的满清权贵、北洋军阀、富商巨贾，还是列国外交使节、各大洋行经理纷纷在墙子河两岸购置房产或租赁居住。清末民初天津权势最高的居住者非河南项城袁世凯家族莫属了，袁家大院位置就在英租界内旧濠墙的“大营门”附近。
1930、40年代，以“义路金花园”和“平安电影院”为中心，商店、饭店、餐厅、咖啡厅、酒吧、总会、电影院在此聚集，“小白楼”成为英租界内独一无二的商业娱乐中心，传播着西式的时尚与娱乐生活。
1952年，平安电影院由天津市文化局接管，1960年更名为音乐厅。“平安”改名音乐厅之后，仍然放映电影，而且是天津少有的几家甲级影院之一。放映的都是一线片子，票价也较其他乙级电影院贵很多。六七十年代的时候，在乙级以下电影院看电影，只需要一毛五或两毛钱就够了，但在音乐厅至少要花三毛以上。
2005年9月音乐厅进行了拆除重建。2008年8月建起了今天这幢天津新音乐厅。