在我国，通奸行为在法律上虽然不视为重罪，但仍然属于刑事违法行为，依照相关法律法规，对于通奸行为会进行相应的处罚。以下是对通奸罪处理及法律依据的详细解读。

首先，根据我国《刑法》第二百五十七条规定，通奸罪是指已婚者与他人通奸，情节较轻的，处五年以下有期徒刑或者拘役；情节严重的，处五年以上有期徒刑。这里的“情节严重”主要包括：通奸次数较多、与社会风气严重不符、给被害人的精神和家庭生活造成严重影响等。

在处理通奸案件中，法院会综合考虑以下因素：通奸的次数、持续时间、双方的感情基础、通奸对于家庭的影响、当事人的悔罪表现等。这些因素将直接影响法院对于刑期的判决。

需要注意的是，对于通奸罪的处罚并不是绝对的，对于一些特定情况下的通奸行为，如由于误会、激情等非主观故意的情况下发生的通奸，法院可以根据情节适当减轻处罚。

此外，我国《民法典》也对此类行为进行了明确规定。根据《民法典》第一千零七十六条规定，因重大过错而导致离婚的，无过错方有权请求赔偿损失。这里的“重大过错”就包括通奸行为。

总之，对于通奸罪的处罚，我国法律体系给出了明确的规定，旨在维护家庭关系、社会秩序以及道德风尚。在现实生活中，我们要充分认识到通奸行为所带来的危害，遵守法律法规，树立正确的价值观，共同维护和谐社会。