なかなかいい質問ですね。実は、「venir de＋不定詞」は、時をあらわす副詞や副詞語句とはふつういっしょに使いません。特に、あきらかに過去をあらわす表現といっしょに使うことはできません。たとえば、「私はきのうここに着いたところです」という意味で、次のように言うことはできません。

     × Je viens d’arriver ici hier.

ここで使われているviensはvenirの現在形の活用形で、あくまでも現在のことを言っているからです。