ja eben!
du musst jedem bild (besser gesagt: jedem link) einen namen zuweisen. dies tust du ja im img-tag. nun darf dieser nicht mehrmals vorkommen, somit nennst du erste bild "image1" und sprichst es im javascript auch mit image1 an. bild zwei ist dann image2. etc...
edit:
<html>
<head>
<meta http-equiv="content-type"
content="text/html; charset=ISO-8859-1">
<title>arplage GmbH</title>
</head>
<body>
<a href="http://antonios.rules.li/link1"
onmouseover="image1.src='http://antonios.rules.li/arplage/button_b.jpg';"
onmouseout="image1.src='http://antonios.rules.li/arplage/button1.jpg';"><img
name="image1" src="http://antonios.rules.li/arplage/button1.jpg"
border="0"></a>
<a href="http://antonios.rules.li/link2"
onmouseover="image2.src='http://antonios.rules.li/arplage/button_b.jpg';"
onmouseout="image2.src='http://antonios.rules.li/arplage/button1.jpg';"><img
name="image2" src="http://antonios.rules.li/arplage/button1.jpg"
border="0"></a>
</body>
</html>