Ông giao cho Nhạc Phi 1 bản trận đồ thời cổ, và nói: "Tướng quân hãy
cầm lấy và chịu khó nghiên cứu, học tập".
Nhạc Phi tiếp nhận bản trận đồ, cảm tạ Tông Trạch rồi nói: "Tác chiến
theo trận đồ là quy tắc thông thường của binh pháp, còn việc vận dụng linh
hoạt, tùy cơ ứng biến lại cần sự khôn ngoan của tướng lĩnh!".
Tông Trạch nghe nói, gật đầu tán thưởng kiến giải của viên tướng trẻ.
giống như Tông Trạch, Nhạc Phi xem việc chống Kim là trách nhiệm của
mình. Sau khi Tống Cao Tông lên ngôi, ông dâng lên 1 sớ tấu, mong Cao
Tông thân dẫn quân Tống bắc phạt để cổ vũ sĩ khí, khôi phục Trung
nguyên. Ông còn phê phán chủ trương của phái chủ hàng Hoàng Tiền
Thiệm, Uông Bá Ngạn. Sớ tấu dâng lên, Tống Cao Tông không những
không nghe theo mà còn cho Nhạc Phi là 1 viên tướng nhỏ mà dám lạm bàn
đại sự, liền cách chức ông. Sau khi Tông Trạch chết, Nhạc Phi thuộc quyền
chỉ huy của quan trấn thủ Đông Kinh là Đỗ Sung. Quân Kim tiến công ào
ạt, Đỗ Sung chạy xuống Kiến Khang. Ngột Truật tiến đánh Kiến Khang,
Đỗ Sung lại đầu hàng nhục nhã. Quân tướng dưới quyền Đỗ Sung đều tan
rã, chỉ có đội quân của Nhạc Phi vẫn còn kiên trì chiến đấu quanh vùng
Kiến Khang. Nhân lúc Ngột Truật rút lui, ông bèn phối hợp với Hàn Thế
Trung đánh cho Ngột Truật đại bại. Sau khi quân Kim rút về bắc, Tống Cao
Tông từ Ôn Châu trở về Lâm An. Triều Kim liền dựng lên 1 hoàng đế bù
nhìn là Lưu Dự cai quản Trung nguyên, lấy quốc hiệu Đại Tề, để làm tay
sai cho triều Kim, quấy rối Nam Tống. Nhạc Phi nhiều lần dẫn quân đánh
lui liên quân Kim - Tề, lập nhiều chiến công. Đến năm 32 tuổi, ông đã từ
địa vị 1 tướng nhỏ được thăng lên chức Tiết độ sứ, ngang hàng với các
danh tướng Hàn Thế Trung, Lưu Quang Thế, Trương Tuấn.
Chính vào thời kì này, ông đã viết 1 bài từ, điệu "Mãn Giang Hồng"
được truyền tụng đời đời. Bài từ nói lên ý chí chống Kim hùng tráng của
ông. Đoạn đầu bài từ viết:
"Nộ phát xung quan, bằng lan sứ, tiêu tiêu vũ yết,