Так говорят о человеке, у которого нет музыкального слуха, т.е. он не может правильно воспроизвести звуки музыки, фальшивит при пении, путает мелодии. Фразеологизм возник благодаря «базарным забавам». На Руси во время большого праздничного базара приглашали человека, который держал ручного медведя, чтобы помериться силой с мишкой. Русская земля всегда славилась смельчаками и богатырями, которые не боялись вступить в схватку со зверем. Исход битвы трудно было предугадать. Нередко смелым и сильным сыновьям удавалось победить лохматого, но часто мишка наносил человеку различные повреждения. После чего человек оставался инвалидом, часто бывали проблемы со слухом. Отсюда и пошло это высказывание.