【正确答案】 B

【答案解析】 行政许可申请应以书面形式提出，不能以口头形式提出。选项A错误。《行政许可法》第32条第2款规定：行政机关受理或者不予受理行政许可申请，应当出具加盖本行政机关专用印章和注明日期的书面凭证。选项B正确。《行政许可法》第47条第2款规定：申请人、利害关系人不承担行政机关组织听证的费用。据此可知，听证费用不应由陈某承担。选项C错误。《行政许可法》第38条第2款规定：行政机关依法作出不予行政许可的书面决定的，应当说明理由，并告知申请人享有依法申请行政复议或者提起行政诉讼的权利。据此可知，行政机关不予行政许可，应当作出书面决定，不能口头告知。选项D错误。故选B。