Ну, можно для начала хотя бы вспомнить, что у мужчин и у женщин понятия об измене существенно различаются.
Затем следует учесть, что измены разделяют на духовные и физические (с точки зрения науки может быть это и нонсенс, но люди так думают).
Есть люди, которые спокойно перенесут случайный половой контакт своего партнера и резко отреагируют на "измену с душевным интересом".
А есть те, кто равнодушно отнесутся ко второму, но не потерпят первого.
Опять же, мотивации для совместной жизни у людей сильно отличаются (любовь с большой буквы "Л" в расчет не берем, это настолько редкое явление, что можно пренебречь ей как погрешностью). Поэтому и измена будет рассматриваться с разных позиций. Соответственно и причины болезненной реакции будут разными.