本题考查刑法的罪名相关知识点。犯罪是指触犯法律而构成罪行。做出违反法律的应受刑法处罚的行为。

A项错误，甲的行为触犯了刑法的规定，所以构成犯罪。

B项正确，根据《中华人民共和国刑法》第196条规定，信用卡诈骗罪是指以非法占有为目的，违反信用卡管理法规，利用信用卡进行诈骗活动，骗取财物数额较大的行为。《最高人民检察院关于拾得他人信用卡并在自动柜员机(ATM机)上使用的行为如何定性问题的批复》，明确规定，拾得他人信用卡并在自动柜员机(ATM机)上使用的行为，属于刑法第一百九十六条第一款第(三)项规定的“冒用他人信用卡”的情形，构成犯罪的，以信用卡诈骗罪追究刑事责任。甲的行为属于冒用他人。

C项错误，根据《中华人民共和国刑法》第193条规定，贷款欺诈罪是指以非法占有为目的，编造引进资金、项目等虚假理由、使用虚假的经济合同、使用虚假的证明文件、使用虚假的产权证明作担保、超出抵押物价值重复担保或者以其他方法，诈骗银行或者其他金融机构的贷款、数额较大的行为。贷款诈骗罪属于金融犯罪的一种。

D项错误，根据《中华人民共和国刑法》第264条规定，盗窃罪是指以非法占有为目的，盗窃公私财物数额较大或者多次盗窃、入户盗窃、携带凶器盗窃、扒窃公私财物的行为。

故正确答案为B。