我的建行卡卡号被骗子知道了，有危险吗？只有卡号知道其他的信息骗子都不知道。