メガネをかけているのですが・・・

皆様、お疲れ様です。

僕は基本的にメガネをかけているのですが、仕事で初めてお会いする人とのぎこちない会話の中で「目、悪いんですか？」という質問に困惑しちゃいます（笑）
そりゃ、お洒落で伊達メガネをかけている方もいらっしゃるでしょうが、ほとんどの人が「目が悪いからメガネをかけているに決まってんじゃん・・・」と思うんです（笑）
しかも、正直に「乱視が特にひどくて・・・」と答えると、同じく目が悪い人からは「実は私もコンタクトを入れてまして・・・」といった何の自慢だか分からない会話が始まり、目が良い人からは「へー、視力いくつなんですか？」と「僕の視力を知って何の意味があるの？」という会話が始まるのが本当に嫌で困っています（笑）
この様な質問をされた時はどのように答えれば良いのでしょうか（笑）？ベストアンサーを教えてください（笑）

3