楊玄璬的曾祖父楊汪，字元度，隋朝梁郡通守。祖父庫部郎中楊令本，父親楊志謙。他的兄長蜀州司戶參軍楊玄琰早卒，女兒楊玉環由楊玄璬撫養，後來選為壽王妃，最後成為了唐玄宗的楊貴妃。楊玄璬官至國子司業、河南府士曹。楊玄璬之子楊鑑，官至湖州刺史。