刃牙面對過各種各樣的對手，無論是多麼強，都無所畏懼進行挑戰，但有三個人曾讓刃牙完全不敢與之對戰，有兩人是真正的實力派，而另一人已經退出格鬥，成為醬油。
成為醬油的就是鎬紅葉，最初登場時非常威風，他的弟弟對他十分敬畏，利用高超的醫學知識，將自己的身體打造成最完美的形態，充滿肌肉的速度與力量，在刃牙面前不斷吹牛，更巧的是正好獨步被勇次郎殺了，而鎬紅葉現場為他進行心臟按摩，居然成功將獨步救活了！完全目睹了這一切的刃牙真的被唬住了，認為此人異常強大，自己完全無法戰勝，居然全身發冷，並且開始顫抖！如果不是鎬紅葉的病患來刃牙這裡告了一狀，刃牙估計上場戰鬥的勇氣都沒了。
另一位自然是勇次郎，毋庸置疑，不過刃牙不敢和他對戰的時期還是在少年刃牙的時候，從回憶中可以看出童年時期勇次郎給了刃牙不少心理陰影，在刃牙心中，老爸絕對是無論如何也無法戰勝的存在，但為了滿足母親的願望，最後還是拼了命硬著頭皮上了。
最後這位是宮本武藏，刃牙第一次和他見面時，就感受到對方無比強大的氣場，之後在庭院進行了一兩個回合的交手，而刃牙始終不敢讓宮本武藏帶著真刀和自己對決，直到第四部的結尾，刃牙才終於和拿真刀的武藏戰鬥。