康熙四十一年, 阿尔吉善留在澳洲后没多久，就遇上了英吉利的皇家海军舰船。
但对方被败血病折腾得十船九空，因此不敢登陆, 被阿尔吉善几个炮打跑了, 没生什么事。但后来两三年里，阿尔吉善得不到大清的补给，炮弹、火药都渐渐用完了, 他也不是那等善于治理管家的人，因此在澳洲府的垦荒一直未能有大的发展，建了些房屋、开了几条道路, 垦了些田地、探了几座矿却无力开采，养牛羊维持生存，之后这垦荒也就停滞了下来。而澳洲的气候天然较为干燥，不论是饮水还是灌溉庄稼全靠天降甘霖，每年的收成也不大好，这阿尔吉善与这七百多人渐渐快要沦为与土著人一般茹毛饮血的境地。
康熙四十五年, 阿尔吉善已经滞留澳洲府将近四年了，当初对海洋的恐惧也渐渐消退, 他身上昂贵的绸缎衣裳早就破破烂烂, 如今换成了与土著人一般的兽皮, 当初带来的铁器与刀剑、弓箭也多有损耗，这里连个铁匠铺都没有，也没法锻铁铸铁, 阿尔吉善把自己的长刀、匕首都珍藏着不敢再用, 也跟土著人学会了用削尖的坚硬树枝投掷捕猎。
当初他们登陆澳洲府是顺着洋流与季风, 在澳洲西北部登陆，沿着海岸线往南走, 便是一大片干、望不见尽头的沙漠，这一整块地方都不适合耕种与生存，只在沙漠边缘有些零零碎碎的土著人开垦的田地罢了，后来阿尔吉善带上人跟着土著人跋涉千里才发现了温暖湿润的东南部，这才是沃野千里的地方。
在这儿安顿下来后，阿尔吉善也过了几年平静的日子，直到今日，又有英吉利的舰船旗帜渐渐靠近了他们，这回，他们来了更多的人！而且看着都很健康，终于，开启大航海时代两百多年了，欧洲人也终于堪破了败血病的真相。
没有火炮，没有手铳，人数也有差距，阿尔吉善与部下没打赢，他果断带着人撤回了澳洲内部，英吉利人立刻占领了东南的沿海港口，他们这次一共来了十二艘大船，船上除了英吉利海军队员，还有很多囚犯、失业的工人。