谢朓在行参军的任上，共呆了四年。永明明年(486)，谢珧迁任随王东中郎府④。随王即武帝第八子子隆(474494)，据本传记载，随王少有文才，见宠武帝，于永明网年为东中郎将、会稽太守。⑤谢朓后来在荆州与子隆有深交，但其初次相识，则当在此时。不久，随王迁中护军。归建康，谢朓亦与之俱归。
请问：这段话中“与之俱归”，是指从哪回来 他们去哪了？
@云翼风澜