言論の自由は保証されているが、

元々、憲法で保障している言論・批判は、政治・体制に対しての批判を示しています。
（これがわからん人は歴史や公民を勉強し直して下さい）
言論・批判を狭く解釈すると、政治・体制への批判以外は、誹謗と見られて仕方ないとも言えます。

例えば、
「小泉政権は駄目だ。クソだ」と言うのは、問答無用で憲法の保証する言論と言えます。
これに対して「いいや。小泉の足を引っ張る自民党員や、だらしない民主党がクソだ」と言うのも言論の自由。
「そんなこと言ってるお前の方がクソだ」と、批判している個人を差して言うと、憲法の保証する言論にあたらず、むしろ誹謗・中傷として違法行為扱いされる可能性がある。又、他人の言論を封鎖してるとも取れます。