人それぞれさん  男性  34歳

ケースバイケースですね。

逆に、相手が出てしまって、
「（いつまでボタン押しているんだ、どんくさいなぁ…）」
と思われているかもしれません。
マナーはあるに超したことはないですが、絶対的なものではないですから。

エレベーターに限らず、全部自分の基準通りの人なんて、探すの大変だと思いますよ。