Ver apenas uma barata já é motivo para preocupação?

Sim. Baratas são noturnas e se escondem bem. Avistar uma durante o dia geralmente indica que há uma infestação ativa no local.