正确答案为：
谓语动词要用单数
因为真正的主语是My father,三单
而with me ,只是做伴随状语,不参与主语
My fater with me goes to swimming every Sunday.
每周日我和我父亲去游泳.