本公开揭示了一种基于视觉识别的自动跟随避障方法，包括：采集目标图像，根据目标的衣服颜色对目标进行识别和定位；根据所述目标的方位和距离信息规划跟随路径；在跟随过程中实时扫描周边环境信息并在必要时调整跟随路径。本公开还揭示了一种基于视觉识别的自动跟随避障机器人，包括：机器人本体、动力模块、视觉定位模块、控制模块和避障模块。本公开通过采集目标的衣服颜色对目标进行识别并进行定位，不需要被跟随者携带发射源或接收源，并且能够减小电磁波干扰提高跟随精度；以目标的衣服颜色信息为对象，能够降低视觉识别的计算量，提高响应速度；能够根据色块区域大小筛选目标降低跟错概率。