桃井氏是足利武家的支族，以上野国的桃井为名。日本南北朝战争期间，桃井一族分属对立的阵营。 桃井直常于1344年出任越中守护，支持足利直义对抗其兄尊氏。1355年，他协助足利直冬夺取京都，随后被逐；1370年长泽之战的败北使他失去了越中的根据地。