import pandas as pd
import os

# Caminho onde estão as subpastas com os arquivos CSV
pasta_entrada = r"C:\Users\joao.herculano\GRUPO GINSENG\Assistência Suprimentos - 2025\CONSULTA ESTOQUE"


# Lista todas as subpastas dentro de "ESTOQUE"
subpastas = [os.path.join(pasta_entrada, d) for d in os.listdir(pasta_entrada) if os.path.isdir(os.path.join(pasta_entrada, d))]

df_list = []

# Percorre todas as subpastas
for subpasta in subpastas:
    arquivos = [f for f in os.listdir(subpasta) if f.endswith(".csv")]
    nome_pasta = os.path.basename(subpasta)  # Obtém o nome da pasta

    for arquivo in arquivos:
        caminho_arquivo = os.path.join(subpasta, arquivo)
        try:
            df = pd.read_csv(caminho_arquivo)  # Melhor para grandes volumes de dados
            df["Arquivo_Origem"] = arquivo  # Adiciona o nome do arquivo de origem
            df["Pasta_Origem"] = nome_pasta  # Adiciona o nome da pasta de origem
            df_list.append(df)
        except Exception as e:
            print(f"Erro ao ler o arquivo {arquivo}: {e}")

if df_list:
    df_final = pd.concat(df_list, ignore_index=True)

    # Caminho do arquivo unificado na pasta de saída
    
    df_final.to_parquet(r"C:\Users\joao.herculano\GRUPO GINSENG\Assistência Suprimentos - 2025\ANALISE ESTOQUE\ESTOQUE_UNIFICADO.parquet", index=False)

else:
    print("Nenhum arquivo pôde ser processado.")