相手が誰かを確認する言葉として、決して失礼な言い方と言うわけではありません。

しかし「あなた、誰？」というニュアンスが直接的に伝わり過ぎてしまいます。

「お名前をお聞かせいただけますでしょうか？」などの違う言い方をしましょう。