柿溪位于澧水平原以西的山地。元代在此设柿溪州，与邻近慈利同属澧州路。后来的地方传统将柿溪与山谷间的世袭首领联系起来，但清代志书作者对元州与后世土司之间的关系有所争议。明初，朝廷军队在巩固西南统治时，对柿溪及其他山地社群用兵。