而后奉调入浙，与倭寇作战。此类人善用刀剑，武艺高强，且性情暴戾，确为难得一见之强敌。征战半生，天下强横之徒，我大都曾见过，却也从无畏惧。但如义乌人之彪勇横霸，善战无畏，实为我前所未见，可怕！可怕！”此后，戚继光连夜求见胡宗宪，要求征召四千名义乌兵。得到批准的戚继光再一次提高了征兵标准，凡选入军中之人，以下几等人不可用：在市井里混过的人不能用；喜欢花拳绣腿的人不能用；年纪过四十的人不能用；在衙门干过的人不能用；喜欢吹牛、高谈阔论的人不能用；胆子小的人不能用；长得白的人不能用；性格偏激的人也不能用。
被录取者，还必须具备如下特征：臂膀强壮，肌肉结实，眼睛比较有神，看上去比较老实，手脚比较长，比较害怕官府。概括起来，戚继光要找的是这样一群人：四肢发达，头脑简单，为人老实，遵纪守法服从政府，敢打硬仗，敢冲锋不怕死的壮汉。除了这些戚继光还嫌不够，甚至还用上了因果报应。他对士兵们说：“诸位都听了，凡你们当兵之日，是要拿饷银的，刮风下雨，袖手高坐，也少不得你一日三分。
但你要记得，这银两都是官府从百姓身上纳来的。现在不用你劳动，白养你几年，不过望你一二阵杀敌。你不肯杀敌，养你何用？就算天不收你，也要假人手杀你！”总之，融合了唐顺之的前期努力、戚继光的划时代改革、明帝国的巨大国力，以及义乌人的凶猛彪悍，日后大名鼎鼎的戚家军，终于被建立了起来。嘉靖四十年（1561年）四月，两万余名倭寇集结完毕，向浙江进发。
他们的目标首先是台州，著名的宁台温大战就此拉开序幕。四月十九日，倭船一艘战船至舟山。舟山把总章延禀率陆军设伏，命水军从后追击倭寇。待倭寇到达，明军伏兵四起，斩首三十五级，明军仅阵亡三人。二十一日，倭寇草撇船一只，停泊洌港。把总周栗统、林仕贵等人，驾船与倭船交战。双方用发熕、佛朗机铳互相炮击三十余轮，倭船火力不如，船身被前后击穿。
之后明军近战接舷，斩首五十余级，全歼这股倭寇。鉴于海上明军水军炮火犀利，于是倭寇在五月一日夜里，烧船偷渡，登陆象山。五月二日，倭寇出岳林庄，明将卢镗率军击鼓前进，与倭寇相距二十里。次日，倭寇行至裘村，分列三阵，与明军对敌。海道把总胡良瑶、李超部明军先到裘村，即率精锐冲锋，大败倭寇。明军斩首一百五十七人，自身仅阵亡三人。
八日，梅山港开来倭船三艘，二百余名倭寇登岸。明军追至东湖，东湖哨兵汤时茂等人杀死倭寇头目。这股倭寇随即夜逃横溪山中，指挥艾升率军抄小路绕行至倭寇前，吕忻追至倭寇身后。看到前有堵截，后有追兵，倭寇躲进余家房舍内，明军赶到后，投火焚屋，倭寇拼死突围，来到朱家店，被设伏的明军包围。倭寇二百余人除两人被生擒外，其余均被明军杀死。
四月十六日，另一股约一千六百人的倭寇，乘坐鸟船十六艘，由象山从奉化西凤登岸，夜里突袭宁海。兵备佥事唐尧臣、参将戚继光将原发往松海二关的三支明军调回。戚继光亲率两支，宁海留一支，命把总任锦率水军前往宁海外洋，堵截倭寇退路。二十二日，倭寇侦查得知戚继光到达宁海，乘虚派五百名倭寇，乘船进入桃渚大域港里浦登岸。
二十三、二十四两日有倭寇八百人入新河周洋港登岸，二十五日，又有倭寇七百人在健跳折头登岸。几支倭寇合计二千余人，逼近新河所城。唐尧臣与戚继光领军救援新河，并命黄、太二县号召当地大族程、梁等姓乡兵助战。当时明军大军云集，有约五百名倭寇动摇，夜里驾船离去。剩余倭寇还有一千五百人，占据城外鲍主薄的宅院，随后于二十六日，进攻新河所城。
明军守将下令士兵有进无退，退者斩。出城列阵，与倭寇用鸟铳对射，同时千总哨长蒋瑞等人率军奋勇冲杀最后，倭寇支撑不住，阵型崩溃，在对射中被明军击毙六十余人，肉搏中被斩首三十人。当晚二更，倭寇冒雨逃往太平县。第二天，刘意、楼楠率领明军追至温领大麦坑。太平知县领乡兵前来围剿，斩首二十二级。残余倭寇有逃往田舍中的，被明军纵火焚屋烧死。
戚继光此时正准备转兵梁王铺，前往桃渚。当他获悉倭寇自桃渚登岸，进兵精进寺，准备进攻台州（今浙江临海）府城后，于是挥师南进，一昼夜行军一百一十里，于二十七日午抵达台州城外。此时倭寇已进至离台州城仅二里的花街。戚继光命丁邦彦部为前锋左哨，从大路迎战；陈大成部为前锋右哨，由江下前进击敌；陈濠等部为中哨正兵；赵记、孙廷贤部为左右翼，分随左右前锋；台州知府王可大督率民兵列阵于城外壕边，来往策应。
