滬西清真寺原名藥水弄回教堂，又稱小沙渡回教堂。俗稱老寺。原址在西康路1501弄（藥水弄）80支弄，1992年4月遷常德路1328弄3號(hào)。
民國3年（1914年）左右，湖北、山東、河南、安徽等地來滬做工的穆斯林貧民集中居住在小沙渡（今西康路）一帶，由于宗教生活需要，由湖北穆斯林在藥水弄又租賃1間小屋，作為臨時(shí)禮拜場(chǎng)所。民國10年（1921年）前后，金質(zhì)庵、馬乙棠、蔣星階與上海清真董事擬定募捐２000元助該寺，在藥水弄內(nèi)租地0．8畝，續(xù)租十年，建造清真寺。民國11年（1922年）7月竣工，共建大殿三間、對(duì)廳三間、廂房1間。民國24年（1935年）整修，大殿可容200人同時(shí)禮拜，庭院種植花草。民國36年（1947年），教長(zhǎng)馬人斌倡議募捐修建，并購置原租地產(chǎn)權(quán)。
1949年中華人民共和國成立以后，該寺屢經(jīng)維修。0結(jié)束后，該寺于1979年重新恢復(fù)宗教活動(dòng)。1990年，普陀區(qū)政府為改造藥水弄舊區(qū)，決定在常德路撥地2.5畝重建清真寺。1990年7月4日動(dòng)工，1992年4月竣工。新建的滬西清真寺，建筑面積N％平方米。它由雙心拱門，扇形穹窿頂?shù)膬蓪佣Y拜殿為主體建筑，與兩條走廊輔助建筑相銜接，宣禮塔高達(dá)25米。禮拜殿分上下兩層，配有男女浴室，講經(jīng)堂、教長(zhǎng)室、會(huì)客室等。前0院各有彩色噴泉，院頂飾有6個(gè)拱形圓頂，3個(gè)裝有新月標(biāo)志。
這是中華人民共和國成立后上海第一座重建的清真寺。在重建過程中，普陀區(qū)政府，市民委、市伊協(xié)和各有關(guān)部門，海內(nèi)外穆斯林給予很大的關(guān)切和經(jīng)濟(jì)支援，共集資約240余萬元，其中普陀區(qū)人民政府撥資160萬元，市伊協(xié)出資70余萬元。