ノロウイルスの感染と職場復帰

今週の日曜晩から月曜未明にかけてノロを発症してしまいました。
発症５日目（ほぼ６日目）の現在、幸いノロに顕著な症状はもうほぼないと言ってよく、念のため食事をレトルト粥などにして処方薬を飲みながら様子を見ています。自宅では下痢のみで、嘔吐は病院での一度だけですが、消毒液もネット等を参考に自作し、一応持ち物を含む自宅内を可能な限り消毒しました。

これらを前提にお伺いしたいのですが、
発症５日目でもノロの患者はその場にいるだけで人に感染させてしまうものなのでしょうか？
今日仕事に行き、帰り際上司から『おまえがいると他の奴が「感染するんじゃないか」と気にしてしまって仕事に集中できないだろう。なぜせめて途中で帰らなかった？ 気遣いが足りない、迷惑だ』という旨のことを遠回しに言われました。トイレはできるだけ行かないようにして、行っても尿だけ、出る際にはハンドソープを使い１分以上の流水で洗っています。同僚の食事の場には寄らず、マスクも飲み物を口にする時以外必ず常時装着するなど、自分なりに気をつけていたつもりでした。

そうだとしても、自主早退しなかった・職場に来た私の判断は間違いだったのでしょうか？（ちなみに掛かった総合病院からは発症当日から「休養に超したことはないが行けるのなら仕事行っても構わない」と言われていました）ご意見お聞かせ願えればと思います。長くなりましたが、よろしくお願いします。