左右两条视神经在下视丘下面的会合。
来自每一视网膜内侧的神经节细胞轴突经视神经至脑底部的视交叉到对侧；由视网膜外侧来的神经纤维乃保留在同一边。离开视交叉后，这些轴突又在两侧各形成一条视神经径，终止于视丘的外侧膝状核，再经视放射传往大脑枕叶视觉中枢。根据纤维交叉的特点，可由上至下分为三层：上层不交叉的纤维比交叉的多，交叉纤维在同侧向后形成弓形弯曲，即“后膝”，然后至对侧；中层交叉与不交叉的纤维各占一半；下层交叉纤维较不交叉的多，交叉纤维至对侧时，部分纤维向前弓形弯曲，形成“前膝”。
由于构造特殊，某些脑的病痛或损伤会引起对侧视觉障碍。
大多数低等脊椎动物的视神经为完全交叉，即两侧视神经纤维各自交叉至对侧。一部分哺乳动物的视神经纤维留在本侧而不交叉。
人类约有3／4的人，视神经纤维不交叉。