Este projeto implementa um sistema de ficheiros FUSE com suporte para deduplicação e inclui uma suite completa de benchmarks e ferramentas de análise.
Nota Final: 17.5
Para compilar o sistema de ficheiros (FUSE):
# Compilar a versão com Deduplicação (usando o Makefile em codededup/)
cd codededup && make clean && make
# O binário gerado chama-se 'passthrough' (dentro de codededup/)Se quiseres correr a implementação manualmente sem usar os scripts de benchmark:
# Criar diretórios necessários
mkdir -p /mnt/fs
mkdir -p /backend
# Executar o FUSE (em foreground para ver logs)
sudo ./passthrough /mnt/fs -omodules="subdir,subdir=/backend" -oallow_other -fPara desmontar:
sudo fusermount3 -u /mnt/fsOs benchmarks estão organizados por categorias dentro da pasta script-teste/.
Podes correr qualquer script .sh diretamente:
sudo ./script-teste/write50dedup/test_write50_mt_dedup.shsudo ./script-teste/run_all.shPor defeito, os testes correm "limpos" (apenas o FIO). Podes ativar ferramentas de monitorização usando variáveis de ambiente:
USE_PIDSTAT=true: Ativa monitorização de CPU/RAM (pidstat).USE_PERF=true: Ativa profiling comperf record.USE_SYSCOUNTER=true: Ativa contagem de syscalls (eBPF).USE_SYSTRACER=true: Ativa tracing detalhado (eBPF).USE_ALL=true: Ativa todas as ferramentas suportadas pelo script.
Exemplos:
# Correr com monitorização de memória
sudo USE_PIDSTAT=true ./script-teste/aging/test_aging_dedup.sh
# Correr tudo com observabilidade total
sudo USE_ALL=true ./script-teste/run_all.shApós correres os testes, os dados brutos (JSON, TXT, DATA) ficam guardados na pasta benchmark_results/.
Para gerar resumos legíveis de todos os testes realizados:
python3 benchmark_analyse/full_analyser.pyEste comando cria ficheiros resume_<categoria>.txt na raiz do projeto com o processamento de todos os dados capturados.
Também podes analisar ficheiros específicos:
# Analisar resultados do FIO
python3 benchmark_analyse/fio_analyser.py benchmark_results/categoria/teste_fio.json
# Analisar consumo de recursos
python3 benchmark_analyse/pidstat_analyser.py benchmark_results/categoria/teste_pidstat.txt
# Analisar Syscalls
python3 benchmark_analyse/syscounter_analyser.py benchmark_results/categoria/teste_syscounter.txt
# Analisar Tracer detalhado
python3 benchmark_analyse/systracer_analyser.py benchmark_results/categoria/teste_systracer.txtcodededup/: Implementação do FUSE com Deduplicação.codebase/: Código base (skeleton) do FUSE.script-teste/: Scripts de automação de testes (Bash).benchmark_analyse/: Ferramentas de processamento de dados (Python).benchmark_results/: Pasta onde os resultados dos testes são depositados.