1966 m. Dieną prezidentas Lyndonas B. Johnsonas paskiria pirmąjį afroamerikiečių kabineto narį. Robertas Weaveris tampa būsto ir urbanistikos departamento (HUD), agentūros, kuriančios ir įgyvendinančios nacionalinę būsto politiką ir vykdančia teisingą teismą, vadovu. būsto įstatymai. Vykdydamas savo Didžiosios visuomenės viziją, Johnsonas siekė pagerinti lenktynių santykius ir pašalinti miesto pūtimą. Kadangi daugelis šalies afroamerikiečių gyveno apleistame miesto rajone, Weaver paskyrimas buvo bandymas parodyti savo afroamerikiečių rinkimų apygardai, kad jis turi verslą abiem pusėms.
Audėjos patirtis socialiniais ir ekonominiais klausimais, susijusiais su miesto afrikiečiais, buvo gerai žinoma. Prieš paskyrimą HUD sekretoriumi, jis užėmė svarbiausias pareigas keliose demokratinėse administracijose. Trečiojo dešimtmečio viduryje – pabaigoje, vadovaujant Franklinui D. Ruzveltui, jis patarė vidaus reikalų sekretoriui ir tarnavo kaip būstų administracijos specialusis padėjėjas. 1940 m. Jis buvo paskirtas į Krašto apsaugos patariamąją komisiją ir Antrojo pasaulinio karo metais dirbo mobilizuodamas juodaodžius darbuotojus. 1955–1959 m. Weaveris dirbo komisaru Niujorko valstijoje, vėliau ėjo Būsto ir namų finansų agentūros, kuriai pirmininkavo Johnas F. Kennedy, vadovo pareigas.
Kaip vyriausiasis HUD administratorius, Weaver išplėtė įperkamo būsto programas ir 1968 m. Pasisakė už Sąžiningo būsto įstatymą, kuris uždraudė bet kokį asmenį diskriminuoti parduodant ar nuomojant būstą ar teikiant privilegijas. su tuo susijusių paslaugų ar priemonių teikimas dėl rasės, odos spalvos, religijos, lyties, šeimyninės padėties ar tautinės kilmės. Weaveris ir Johnsonas turėjo bendrą tikslą atgaivinti Amerikos miesto teritorijas tobulindami būstus, kurdami miesto parkus ir remdami Afrikos amerikiečiams priklausančias įmones.