Dumating ang panahon na pinagnasaan siya ng asawa ni Potifar. Sinabi nito, “Sipingan mo ako.”
Tumanggi si Jose at ang sabi, “Panatag po ang kalooban ng aking panginoon sapagkat ako'y narito. Ginawa niya akong katiwala, at ipinamahala niya sa akin ang lahat sa bahay na ito, maliban sa inyo na kanyang asawa. Hindi ko po magagawa ang ganyan kalaking kataksilan at pagkakasala sa Diyos.”