Много споров ведётся по этому вопросу. Баба и мужик - раньше это было нормой. У Шолохова в "Поднятой целине" - бабы. И как-то нормально это воспринимается. Без какх-либо кривотолков.
1. Замужняя крестьянка, а также вообще женщина из простонародья (прост.).
2. Вообще о женщине (иногда с пренебр. или шутл. оттенком) (прост.).
3. То же, что жена (в 1 знач.) (прост. и обл.).
... (словарь Ожегова)
Если разбирать в происхождении и толковании этих слов, то "мужик" можно воспринять, как оскорбление (в старину так и было). Просто сейчас значение этого слова среди большинства людей толкуется по-другому (настоящий мужик, сильный мужик, смелый мужик...) А про "бабу" есть предположение, что это слово воспринимается женщинами, как обидное, из-за того, что ассоциирует у них с возрастом, сельской местностью,... Баба Яга, бой-баба - это тоже добавляет негатива к восприятию обращения "баба".
"Бабье лето" , "45 - баба ягодка опять" - эти выражение все употребляют и воспринимают положительно=)