北海道函館市で、日魯漁業（現・マルハニチロ）に勤める父・理喜男と、レストラン五島軒店主の若山徳次郎の長女・柳の長男として生まれる。1943年（昭和18年）市立函館中学校（現市立函館高等学校）に入学するが、翌年父の転勤に伴い樺太豊原市へ引越し、樺太庁立豊原中学校に転入。1945年（昭和20年）3月函館に戻る。終戦後、北海道立札幌第一高等学校（現北海道札幌南高等学校）へ転校。1948年（昭和23年）、北海道大学予科文類に入学、この頃から作曲を始める。教育学部へ進み、1953年（昭和28年）に卒業後、上京。1955年（昭和30年）に東京藝術大学作曲科に入学。1961年（昭和36年）に同専攻科を修了。在学中、池内友次郎、島岡譲、矢代秋雄らに師事。1977年（昭和52年）から1996年（平成8年）まで京都市立芸術大学音楽学部教授を務め、その後同大学音楽研究科長、音楽学部長を歴任。