王は信用商売
王が臣下を信用しなければ臣下も王を信用しない
剣を預かるってことは王は自分たちの忠誠を疑ってるってことだし
疑われていい気のする奴は居ない

そもそも酒の席といっても王が下段に降りて家臣と肩組んで酒を酌み交わすわけじゃないだろう