Das andere grundlegende Rätsel beim Verständnis wahrgenommener Bewegung ist die Richtung. Das Phänomen, das in diesem Fall verstanden werden muss, ist der Effekt von Kontexten auf die scheinbare Bewegungsrichtung. Diese ergänzende Eigenschaft von bewegten Objekten kann auch empirisch erklärt werden und wäre algorithmisch schwer verständlich zu machen.