Фраза-паразит. Вероятно, подхватил её в ходе своей педагогической деятельности.
Применялась к ученикам(на детей сильно действует репутация педагога и его серьезные фразы), к товарищам(опять репутация, ничего более) и даже к девушкам.

Суть - высказывание недовольство в мягкой форме. Недовольство некоторыми обстоятельствами, за которые несет ответственность объект(собеседник).
Например, закрутил товарищ со мной конфликт, чтобы самоутвердиться - а я ему: эх ты(аргументы против), я недоволен тобой. Разочаровал.

Я пошел еще дальше и стал употреблять эту фразу по отношению к... собаке.
Хулиганит, тырит носки, лает на прохожих беспричинно? Подойду, нагнусь прямо к морде и с серьезным видом скажу: Я недоволен тобой! Слышишь? Не-до-во-лен!
Сначала на собаку не очень действовало. Сейчас, вероятно, выработался условный рефлекс и она воспринимает эту фразу, как обычное ругательство - будто она что-то сделала не так.
После чего виновато опускает голову. И поделом.

Да, кстати - вами я тоже недоволен.