OP, esto, francamente, es algo en lo que debería haber pensado antes de casarse con esta persona.
Pero dada la situación, la forma correcta de hacerlo es decir: “Lo siento, pero no le rezaré a Zeus contigo, soy un rastafari” (o lo que sea). Eso solo debería ser suficiente. Si la familia tiene un problema con esto, entonces esto es una falta de cortesía por su parte, no por la suya.