Как отказать работодателю?

[POLKAN]

Проходила собеседование и расстались мы с директором предприятия на том, что я ему перезвоню и скажу мое решение.
Но идти я работать туда не хочу, хоть и зарплата повыше, чем была на предыдущей работе, и перспективы роста есть и развитие рынка с Россией их интерсует. Дело в том, что коллектив не очень большои, почти семья, все должны смотреть в одну сторону и засыпать с одной мыслью. Да и директор очень авторитарный, я такое долго не выдержу.
Как бы мне ему отказать в вежливой форме и по существу? Не скажу же я ему, что мы психологически не совместимы.
Да и дипломат из меня никакой.