A húszas évek második felében meleg teát osztott és éjjeli menedékhelyet tartott fenn. Később gazdag embereket, cégeket, bankokat keresett fel, adományt gyűjtött. Ingyenkonyháján a Kálvin téren, a Kálvária téren, a Haller téri szegénypiacon - később a Városligetben, majd az Almássy téren – ingyenebédet osztott az éhezőknek, naponta 200-300 adag levest. Nagy népszerűségnek örvendett, tekintélyes támogatói voltak, akik a hatóságok esetleges fellépéseitől is megvédték.
Azonban, amikor már egy évtizede működtek Róbert bácsi konyhái és neve fogalommá vált, kiderült, hogy a gazdagoktól gyűjtött élelem és ruházat jobb részét a szegények sohasem látták. Az összegyűjtött pénzek nagy részét is elsikkasztotta Róbert bácsi, aki a pénzből Bécsben két házat vásárolt. 1930-ban a segélyezések kapcsán kirobbant botrány miatt letartóztatták Feinsilber Róbertet. A rendőrség megállapította, hogy a szélhámos bécsi vagyonát nem áll módjában elkobozni. Kiderült, hogy nem magyar állampolgár, nem szabad ellene eljárást folytatni, ezért kiutasították az országból. 1930. május 2-án elhagyta Magyarországot. Furcsa távozása és a személye körüli találgatások máig megkérdezőjelezik szerepét.
Füst Milán emlékezése:
Feinsilber és Conrad: – két csodabogár együtt! – És hogy összekerűltek, hogy egymásra találtak! Az egyik talán jó ember is, – mindenesetre utrirozza, hogy ő jó ember…. abból él…. Ő az ország jó embere, a Róbert bácsi, – a merő, csöpögő jóindulat…. A másik talán nem is rossz ember, – de hogy rosszaságát legitimálja, hirdeti, hogy ő rossz ember…. Érdekes lehet a beszélgetésük…. (Mondja, mit húzza maga ki azt a szerencsétlent a Dunából? – Mért nem hagyja maga meghalni azt, aki meg akar halni? Mit erőszakoskodik, mit tolakdik? Mit olyan mumus maga?)
Füst Milán Negyedik naplófüzet 1922. október 1. – 1923. december 31.
Harminc esztendő óta vagyok Magyarországon. Ami a vagyonomból megmaradt még, azt felajánlottam az öngyilkosok és a szegénysorba jutott emberek megsegítésére. Folytatom ezt a munkát mindaddig, amíg csak mozogni tudok. A vagyonom ugyan már jórészben elfogyott, de ma már segítenek engem azok az emberek, akiket én mentettem meg, akiket visszaadtam az életnek. A Vásárcsarnokban a kereskedők között akadnak ismerősök, és mindenütt adnak segítséget. úgy érzem az a legnagyobb boldogság, ha enyhíthetek mások szenvedésein. Az élet célja és értelme számomra a JÓTÉKONYSÁG. Ha halálomkor lesz még némi vagyonom, azt is az utolsó fillérig a szegényekre hagyom. Az a kívánságom, ha meghalok, a legegyszerűbb fakoporsóban temessenek, és a gyászszertartáson megtakarított filléreket is adják az éhező, elesett embereknek. Még csak egyet: Nem röstellem, hogy zsidó voltam. Elvégre a tizenkét apostol is zsidó volt.