The reason why it's hard to discuss "self-love" may be that it has a kind of a narcissistic whiff and sounds a little icky to people.
S'il est si difficile de parler de l'amour qu'on porte à soi-même, c'est peut-être parce que ça ressemble à du narcissisme et que c'est un peu glauque.