军人有外遇不会算作破坏军婚，根据法律规定在明知道是现役军人配偶的情况下还与之同居或者结婚的，才能认定为破坏军婚。军人一方出轨的可以认定为有重大过错，但不能认定为破坏军婚。
《中华人民共和国刑法》第二百五十九条：明知是现役军人的配偶而与之同居或者结婚的，处三年以下有期徒刑或者拘役。利用职权、从属关系，以胁迫手段奸淫现役军人的妻子的，依照刑法第二百三十六条的规定定罪处罚。
二、军人有外遇应该怎么办
如果军人构成重婚，军人的配偶可以带着证据把军人起诉到法院，要求判决军人重婚罪。法院如果判了军人重婚罪，军人会被“处二年以下有期徒刑或者拘役。”军百人可能会被开除军籍的。
如果军人没有构成重婚，军人的配偶可以选择与军人离婚，或者选择与军人协商。
《民法典》（2021年1月1日起实施）第一千零八十一条 现役军人的配偶要求离婚，应当征得军人同意，但是军人一方有重大过错的除外。
三、军人离婚财产怎么分配
个人财产各自所有，共同财产一般平均分配。
1、军人伤亡保险金等财产的分配
军人的伤亡保险金、伤残补助金、医药生活补助费属于个人财产。离婚时，应确定为军人个人所有。
发放到军人名下的复员费、自主择业费等一次性费用的，以夫妻婚姻关系存续年限乘以年平均值，所得额为夫妻共同财产。离婚时，一般由夫妻平均分配。
“平均值”指将发放到军人名下的上述费用总额按具体年限均分得出的数额。具体年限为人均寿命70岁与军人入伍时的实际年龄差额。
2、军人所获住房补贴的分配
目前部队发放的住房补贴是否属个人财产，法律上没有明文规定。
住房补贴指军队以货币形式给予军职以下军官、文职干部和士官住房消费的经济补偿。《军队人员住房资金管理暂行办法》规定，计入个人账户的住房资金，属于军队人员个人所有。这不表示住房补贴是军人的个人财产。
根据最高人民法院的司法解释规定，婚姻关系存续期间，男女双方实际取得或者应当取得的住房补贴、住房公积金，属于应归夫妻共同所有的财产。据此，军人的住房补贴应属夫妻共同财产。在双方离婚时，一般应由夫妻平均分配。
延伸阅读：
军婚离婚财产怎么分割？
军婚离婚手续怎么办理？
军婚离婚时去哪个法院起诉
