แต่หลังจากเข้ารับตำแหน่งไม่นาน ชื่อเสียงของเขาก็เริ่มจะดิ่งลง เนื่องจากเขาตัดสินใจผิดพลาดหลายครั้ง รวมถึงการที่ให้ออสเตรเลียสนับสนุนสงครามเวียดนามทั้งๆ ที่ประชาชนส่วนใหญ่ไม่เห็นด้วย และยังทำเรื่องขายหน้าต่อหน้าสื่อและมักจะให้ข้อมูลผิดๆ และยังถูกคนในพรรคตราหน้าว่าเป็นผู้นำที่อ่อนแอ