我用淘宝卡买东西没经过支付宝就直接付款~那是不是我的钱就直接到了卖家的帐户了啊？

不会的。
钱不会直接付给卖家。付给了支付宝管理起来了。交易成功后就会支付给卖家。
不成功就会自动退款到你绑定的支付宝号里面。如果没有支付宝。退款的时候会要你自己设置个银行密码。或者是支付宝。（不成功是要你申请退款才有以上结果）。

看你买店铺的信誉了 要是新店或许有这种情况 要是钻了 一般会发货的 跟卖家聊天 截图 以备不时之需

跟卖家聊天,想办法让他承认钱他收到了,然后截图,如果他最后不发货,就把截下的聊天记录发给淘宝,然后投诉卖家