单方行政行为的责任主体是指发出行政行为的机关或个人，也就是行政行为的责任主体。在单方行政行为中，责任主体一般是行政机关，因为行政机关是行使行政权力的主体，具有行政行为的主体资格。因此，在单方行政行为中，行政机关通常承担行政责任。
行政机关在履行职责过程中，如果出现了错误、违法或损害了他人合法权益的情况，就需要承担相应的责任。这种责任包括行政法律责任和行政民事责任。行政法律责任是指行政机关依法对自己的违法行为承担的法律责任，如撤销违法行政行为、赔偿当事人损失等；行政民事责任是指行政机关因行政行为侵害了他人合法权益而需要承担的民事赔偿责任，如赔偿当事人的经济损失、精神损害赔偿等。
在实际工作中，如果管理者遇到单方行政行为导致的责任问题，可以通过以下渠道解决：
遵循法定程序：管理者应当遵循法定程序，依法提起行政复议或行政诉讼，要求行政机关撤销违法行为或赔偿损失。寻求法律援助：如果管理者无法自行解决问题，可以寻求律师或法律援助机构的帮助，协助处理行政责任问题。提升法律意识：管理者应加强法律知识学习，提升自身的法律意识，以便更好地维护自己的合法权益。加强沟通协商：在处理行政责任问题时，可以尝试通过沟通协商的方式解决争议，尽量避免走法律程序，减少纠纷和损失。总之，单方行政行为的责任主体是行政机关，遇到责任问题时，管理者可以通过法定程序、法律援助、提升法律意识和加强沟通协商等方式来解决。