É possível usar Java sem Instalar uma IDE? Sem instalar Intellij, Eclipse, Netbeans e VSCode

Sim! Você só precisa do bloco de notas e o prompt de comandos do Windows. Para ver isso na prática, aprender a configurar e criar seu projeto, do zero, com todos os detalhes e conceitos iniciais para começar a estudar java, assista aqui: https://youtu.be/aES2cZkML0E

Agora, você só precisa instalar o java jdk, o kit de desenvolvimento do java, configurar a variável de ambiente do windows (você gasta menos de 1 minuto), e criar seus projetos, rápido, prático, e intuitivo.

Bons estudos.