И я бы так делал. И начал бы со сборки основных пакетов, которых сотни две. Ручками неспеша за несколько месяцев все устаканится. Пессимизм пропадет. Главное не спешить.
От мыслей толку мало, их нужно реализовывать. В openwrt все значительно лучше автоматизировано, но там другие недостатки. И сам не думал, что то, чем занимаюсь увлечет. Раньше были загадки, почему не собирается XXX. Сейчас гораздо проще.