Kiedy miał sześć lat jego starszy brat Kunio uratował go przed utonięciem.
Podczas TCS 1971/72 wygrał pierwsze trzy konkursy i był największym faworytem do wygrania klasyfikacji generalnej. Jednak przed ostatnim konkursem w Bischofshofen musiał wrócić do Japonii, aby wziąć udział w krajowych kwalifikacjach do Igrzysk Olimpijskich w Sapporo.
W 1972 został pierwszym Japończykiem, który wywalczył olimpijskie złoto.
Kasaya jest członkiem Komitetu Skoków Narciarskich FIS oraz sędziuje konkursy.