自古以来，流传着孪生兄弟东郎西郎与孪生姐妹玉姑小姑恋爱的动人故事（见《山水园林·阳朔公园·西郎山》），更为东郎山增添神奇色彩。东郎山东面公路旁，有宋代应诚庙遗址和东山亭，残留的《尚书省牒静江府阳朔县应诚庙威显侯》石碑刻于宋绍兴十一年（1141），是阳朔现存最古的碑刻。东郎山南，是宋代繁荣一时的黄道街遗址。山麓曾是新石器时代原始人类活动之地，有古猿遗址。唐曹邺诗云：“东郎屹立向东方，翘首朝朝候太阳；一片丹心存千古，谁云坐处是遐荒。”