可以。但是省略掉my也有可能表示是别人的外祖母或者外祖父。加my会特指我的外祖母或者外祖父。with是介词，后面可以接名词，也可以接名词短语等。