Почему произошёл переход от множества разнообразных форматов хранения данных к использованию универсальных СУБД

Ответ:

Раньше каждая база данных имела свой собственный формат, соответственно для каждой ИС приходилось разрабатывать специальную программу для работы с базой данных. Это было не удобно, поэтому перешли к СУБД, которые способны обрабатывать любые данные, независимо от их содержания.