我没有得向主人（以前的老板）敬酒，是不是很失礼？？

应该过去打招呼呀！这是最起码的尊重。然后敬酒，联络一下感情，毕竟是以前的老板请你去的，对你还是有感情的。

应该过去，可能有时候担心一些事情没过去，时候我觉的应该回老板一个电话表示下谢意

你不敬酒是没有什么关系，但起码要打声招呼嘛。不过你说他是你以前的老板，也就是说他已经不是你的老板咯。所以你也算是他的朋友咯！可是你应该以他的朋友的身份和他打声招呼。可你却没有，所以这样你因该算没有礼貌。不过如果他没注意到你，他因该不会对你留下不好的印象。