本发明属于智慧供电技术领域，具体公开了一种基于自注意力的电费预警方法、装置、设备及介质。包括：获取预设范围内的营销数据，生成原始样本集；采用自注意力机制和多层感知器进行特征提取得到风险评级；获取预设范围内各用户的基本信息构建若干用户画像，采用语言模型处理若干用户画像得到信用评分；根据各用户的风险评级和各用户的信用评分设置风险阈值，根据风险阈值和各用户的风险评级将用户划分为风险用户和正常用户；对风险用户发出预警，并对风险用户的电费数据进行监控。本发明通过注意力机制提高特征提取的准确性，提取出关键的风险信息特征，提高了数据处理的准确性，从而及时对用户电费情况进行预警，避免额外损失的产生。