사이트 확인해봤습니다. 

워드프레스 에디터 한단에 나오는 P 글자는 태그를 나타냅니다. 

P 이외에도 에디터에 다른 태그가 입력되면 해당 태그가 자동으로 출력됩니다. 

워드프레스 에디터의 기능으로 없애는 것에 대해서 관련 자료를 찾아보겠습니다. 

(하지만 없애는 게 가능할지는 장답 할 수 없습니다^^;;)