自社のTeamsではユーザーアイコンの設定変更は容易にできますが、ゲストユーザーとして招待されたテナントでは、自社で設定したアイコンを引き継がないので個別に設定が必要です。

コミュニケーションのためにはアイコンが必要

ユーザーアイコンが設定されていれば、アイコンだけで誰か判断できるのでコミュニケートがしやすいです。
TwitterなどのSNSでもアイコンで判断してたりしませんか?
teamsはビジネス用途で使うので、ちゃんと自分の顔写真を設定しましょう

参考:アイコンは自分の写真を設定しましょう

ゲストログイン時に変更する

テナント切り替え時のポップアップ

招待されたテナントへ切り替え時にポップアップで変更を促されるのでここで変更しましょう。
同時に表示名の変更も促されます。相手企業の表示される適切な氏名を設定しましょう。企業によってはローマ字などで設定すると良いかもしれません。

既存のアイコンを変更する時

自社で変更する方法と同じです、
右上のアイコンをクリックしてプロフィールの編集から変更できます。簡単ですね。