江湾路上的跑马场，是由当年的上海五金大王的第四个儿子，加入了日本国籍的华人建立的。
其实这个跑马场的新建也是偶然的缘故叶五金大王的四子生得仪表堂堂，学得满腹经纶，为人豪爽，敢作敢为。一次兴致勃勃地去跑马厅观看赛马，结果乘兴而去，扫兴而回，心中十分气愤，于是在1908年毅然集股在沪创办“江湾赛马场”。
当时以每亩大洋60元，收购土地1000余亩，建成半径为500米的圆形马场，中有三圈跑马道，外圈铺成草地，设有东西北三个看台，场内建有自鸣钟楼，方形尖顶。赛马约每月举行一次，门票1元，全年税收近百万元。江湾赛马场虽主要供华人赛马之用，但不拒洋人，所以每每盛况空前。
曾经的江湾赛马场也是有着辉煌的成就，1911年法国飞行家环龙携在欧洲刚刚发明的飞机，来沪作环球飞行表演，起飞地点就设在江湾赛马场，不幸起飞后失事，环龙身亡。
当时花无百样红，岁月总是带走昔日的辉煌，叶家四子从经营江湾赛马场所获的利润中，拨出一部分资金建造叶家花园。这座花园位于江湾赛马场旁边，主要供赛马赌客休息游乐之用。花园费时数年，耗资甚巨，在1923年春初步建成对外