Alguna vez estuve muy activa utilizando estos paquetes, inclusive configuré el smoker con cpan plus, y estaba entre los 10 primeros con mayor número de reportes para el ambiente cygwin con perl 5.8 y 5.10. bueno dejo mis anotaciones para luego tenerlas de referencia.
Hoy en día no creo que configure el smoker (no tengo tiempo y hardware), pero al menos los paquetes que uso habitualmente podría enviar los reportes eso es lo que voy a configurar en linux.
Anteriormente se guardaba en una carpeta oculta cpanreporter la información de la configuración para utilizar estos paquetes, leyendo nuevamente la wiki, no ha cambiado mucho (del 1.0 al 2.0 si cambió pero justo lo dejé migrado) de hecho el profile que cree años atrás aún pude servir ya que leyendo no han creado un cpan tester 3.0 aún.
sólo instalé:
Task::CPAN::Reporter
y copia la carpeta .cpanreporter que debería contiene el config.ini y el archivo que identifica tu profile metabase_id.json y no olvidar decirle a cpan que envíe los reportes:
cpan> o conf test_report 1
o conf init test_report
o conf commit
Como ya tienes tus archivos, no necesitaría generar un nuevo archivo de configuración ni generar un profile. Por lo que a las preguntas que realice el commanto o conf init test_report, coloca no. Si quieres generar un nuevo perfil dile que si, y el te colocará los valores por defecto.
Tomado de acá: http://wiki.cpantesters.org/wiki/QuickStart
para más información: http://wiki.cpantesters.org/wiki
y acá: http://search.cpan.org/dist/CPAN-Reporter/lib/CPAN/Reporter.pm#Configuration