美 여행금지 지정에 놀란 日, 올림픽 참가 성명에 안도