应该是“近之则不逊，远之则怨”，出自孔子的《论语·第十七章·阳货篇》，原文是:“唯女子与小人难养也,近之则不逊，远之则怨。”意思是:“妇女和小人，是很难以相处的。接近他吧，他会对你失掉尊重，变得肆无忌惮，妇女归家吧，她会跟你吵架，不悦后疏远小人，他则会故意折磨你。生气后离开家门，妇女又会变成怨妇，埋怨你。”

现在也用来形容人难以相处。