「WP-PageNavi」などもそうですが、WordPressでページ分割した際にタイトルタグやメタデータ、h1などが重複し、ウェブマスターツール > 最適化 > HTMLの改善にて「重複するデータ」として咎められてしまうことがあります。
SEOにおいて恒久的かつ確定的なことなんてないと思っているのでその辺りについて言及するのは気が引けるのですが、Google様が改善せよと仰るのなら改善して悪いことはないと思うので改善方法をご紹介します。

前振りの割にすごく簡単な施策で恐縮なのですが、条件分岐タグ「is_paged()」を使えば簡単に実現できます。

if(is_paged()): echo get_query_var('paged'). "ページ目"; endif; 

「is_paged()」は複数に渡るページの時、2ページ目以降ならtrueを返すタグですので上記の記述では1ページ目には何も表示せず、2ページ目からページ数が挿入される形になります。