Tėvai: Vladislovas Petras Orvidas ir Juzefa Mackevičiūtė-Orvidienė – dvarininkai bajorai, žemdirbiai ūkininkai ir verslininkai. Broliai ir seserys: Mečislovas Orvidas (1893 – po 1956) – žemdirbys ūkininkas, 1948–1956 m. tremtinys Buriatijoje (Rusija), Vanda Orvidaitė (1896–?), Juozapas Orvidas (1904–?), Bronislava Orvidaitė-Anikevičienė (1906–?) ir Ona Orvidaitė (1910–?).

1892 m. spalio 30 d. Traupio bažnyčioje jį pakrikštijo klebonas Juozapas Butvydas, krikštatėviais buvo Juozapas Orvidas ir Marijona Skorulskaitė.

1913 m. baigė Panevėžio gimnaziją. 1913–1919 m. studijavo Vilniaus kunigų seminarijoje, baigė filosofijos ir teologijos studijas.

1919 m. gegužės 16 d. Vilniaus vyskupas Juozapas Matulevičius įšventino A. Orvidą kunigu.

1919–1928 m. A. Orvidas tarnavo Kaišiadorių vyskupijos parapijose, buvo vikaras ir kapelionas Žiežmariuose (Kaišiadorių r.), Stakliškėse (Prienų r.), Merkinėje (Varėnos r.) ir Gelvonuose (Širvintų r.).

1928 m. A. Orvidas išvyko į JAV ir toliau tarnavo JAV lietuvių katalikų parapijose. 1928–1929 m. jis buvo Ročesterio (Rochester, Niujorko valstija) Šv. Jurgio parapijos klebonas, laikinai pavadavęs sergantį dvasininką. 1929–1933 m. jis tarnavo Amsterdamo (Amsterdam city, Niujorko valstija) Šv. Kazimiero parapijoje.

1933–1952 m. ir vėliau A. Orvidas buvo Skenektadžio (Schenectady, Niujorko valstija) Šv. Kryžiaus parapijos klebonas. Mažoje lietuvių parapijoje jis pasižymėjo gero administratoriaus gebėjimais: išmokėjo parapijos skolas, siekusias 10 tūkst. JAV dolerių, keliskart atnaujino maldos namų interjerą.

Šioje parapijoje jis ypatingai skatino lietuvybę, visus šventinius pamokslus sakydamas tik lietuviškai, platindamas lietuvišką spaudą. Rūpindamasis naująja pokarine lietuvių emigracija, kasmet jis rengdavo specialų pobūvį, kurio metu surinktas lėšas aukodavo Baltijos-Amerikos lietuvių fondui (BALF-ui).

Jis kvietė lietuvius karo pabėgėlius atvykti iš laikinųjų stovyklų Vokietijoje į JAV ir kitus ragino juos kviestis, globojo į JAV atvykstančius lietuvius dvasininkus, rūpinosi jų pragyvenimu.

Senatvėje A. Orvidas gyveno Putname (Konektikuto valstija), reziduodamas Švč. Mergelės Marijos Nekaltojo Prasidėjimo Vargdienių seserų kongregacijos vienuolyne. Jis buvo JAV lietuvių mėnesinio kultūros žurnalo "Aidai" bei kitų religinio turinio lietuviškų leidinių rėmėjas.

Artimųjų prisiminimuose dvasininkas išliko kaip tylus, ramus, malonaus būdo, sužavėjęs kiekvieną, kuris tik jį pažino.

Mirė 1973 m. spalio 6 d. Putname (Konektikuto valstija, JAV). Palaidotas Putnamo Dangaus Vartų kapinėse.