Родился в 1943 году в селе Васильевка в Саратовской области в семье испанского политического эмигранта. Начальное художественное образование он получил в Московской средней художественной школе. После он поступает в Строгановское училище. Уже в раннем творчестве мастера проявляется интерес к кинетическому искусству; Инфанте создает инсталляции, объекты. В 1975 году он организовал группу «Арго», объединявшей художников, создающих конструкции подобного рода.
Инфанте черпает вдохновение в творчестве Казимира Малевича, заимствует совершенные геометрические формы. Основу многих его работ также представляют зеркала, которые определенным образом размещают в ландшафте (Лэнд-Арт).