まっつんさん計測ありがとうございます。
自分の環境のせいではないと分かり、うれしいようながっかりしたような…

それはさておき、どうも数値の差はキーを押しっぱなしにした場合における文字の入力間隔が関わっているようです。
試しに遅くしてみたところ３０％辺りまで下がりました。（まぁこれは個人ごとの設定なので根本的な解決にはならないんですが）

いずれにせよ、グラフィックの場合にやたら高くつくというのは変わりませんね。

現状ではキー入力を使う際のグラフィックインスタンス数に注意しておくしかないでしょう。