--with-linux-prefix=/usr/arm-linux/ 옵션에 문제가 있는 듯 하네요

보드용 커널 소스 ( 즉 StrongARM 패치한 커널 소스 )
위치를 지정해야 하는데

/usr/arm-linux/ 은 보통 크로스 툴체인이 설치된 위치거든요..