שכונת החותרים, טירת כרמל