여러가지 방법이 있는데 가장 쉬운 방법은 jquery mouseover 이벤트를 이용하는 겁니다.
구글에서 jquery mouseover 이벤트를 검색해 보세요.

제이쿼리 mouseenter

http://search.naver.com/search.naver?where=nexearch&query=mouseenter&sm=top_sug.pre&fbm=1&acr=1&acq=mouseen&qdt=0&ie=utf8

jquery의 .hover() 메소드를 이용하는 방법도 있습니다.^^

페이지에 <script src="http://code.jquery.com/jquery-latest.min.js"></script> 를 넣어주시고요..
아래 소스를 활용해서 만들어보셔요~

<script>
$(document).ready(function(){
$('div.마우스올릴div명').hover(
function()
{
$("img.아이콘이미지클래스명").show();
},
function()
{
$("img.아이콘이미지클래스명").hide();
});
});
</script>



http://sir.co.kr/bbs/board.php?bo_table=pg_tip&wr_id=10977&sca=&sfl=wr_subject%7C%7Cwr_content&stx=hover
여기에도 소스가 있네요..

발코딩 한번 해봤습니다. 돌아갈진 모르겠네요.
$(function(){
var $overimg = $("<img>").addClass('over').attr('src','http://kinimage.naver.net/20140924_232/1411549767211aizkB_PNG/over.png').css('opacity',0.5);
var $target = $("#main_logo").parent();
$target.hover(
function(){
var t_w = $target.find("img").width();
var t_h = $target.find("img").height();

$overimg.css({
'height':t_h,
'width':t_w
})
$target.append($overimg)
}
,function(){
$(".over").remove();
}

)

})