Is a pregnant woman allowed to visit the Ohel?

Yes. The custom does not apply to Kivrei Tzadikim.

Sources:

בכלל, שקו״ט במקור המנהג – ראה שו״ת מנח״י י, מב. וראה שו״ת מהר”י שטייף מהדו”ח שי״ל לאחרונה בשאילת יונתן סד. ויש שכתבו שהוא ע״פ שבט מוסר כד. ועד״ז מעבר יבק שפתי צדיק ה. אבל בכה״ג לא נהגו להחמיר, דל״ש שם רוה״ט – ראה חינוך רסג. וכ״כ בשו״ת שבט הקהתי ה, קעא. מבשר טוב ב, קיב. ובלא״ה במקום צורך מעולם לא נמנעו.