As duas formas – casual e causal – existem na Língua Portuguesa.

Ou seja, ambas as expressões estão corretas, devendo, no entanto, ser usadas em diferentes situações.

Casual significa aquilo que depende do acaso para ocorrer; não frequente; ocasional; eventual; acidental.

Foi só um bate-papo casual.
Foi uma coisa casual e ele não tem interesse em continuar.

Causal significa relativo a causa; que é a causa de algo.

Se viajares no tempo para mudar algo, então acabas por ser o fator causal desse evento.
A desnutrição é um fator causal de fraqueza.


Referências

São palavras parónimas: semelhantes tanto na escrita e na pronúncia mas com significado diferente.

Casual advém do latim casualis.
Causal advém da construção causa + al.