מתי ניתן לבקש פסילת עורך דין, בשל ניגוד עניינים?

לפני כשנה פניתי לעורך דין שיעזור לי בכתיבת כתב תביעה לגירושין. בסופו של דבר לא פתחתי תיק גירושין. לפני שבועיים היינו בדיון בבית הדין הרבני ואני רואה שהוא מייצג כעת את אישתי. האם אני יכול כעת לבקש שיפסלו אותו מלייצג אותה? או כיוון שלא עשיתי זאת בדיון הראשון אין לי אפשרות לעשות זאת כעת? תודה