解：$(1)$根据题意，得$+5+(+4)+(-8)+(+10)+ (+3)+(-6)+(+7)+(-11)=4($千米$)$
∴小王在出发点的东边，距出发点$4$千米
$(2)$根据题意，得$5+4+8+10+3+6+7+11=54($千米$)$
∵汽车耗油量为$0.2$升$/$千米
∴总耗油量是$54×0.2=10.8($升$)$
花费：$10.8×a=10.8a($元$)$
答：当天耗油$10.8$升，小王共花费了$10.8a$元$.$
