下丘脑至神经垂体的纤维起自室旁核和视上核，分别称室旁垂体束和视上垂体束。