ParadigmPipeline Execution Log 6:18 PM Wed Aug 1, '12

Running as user: cgaadm_deadline

ParadigmPreprocessExpression1 broadFile file:/xchip/cga/gdac-prod/tcga-gdac/jobResults/GDAC_MergeDataFilesPipeline/LUSC/1551625/2.GDAC_MergeDataFiles.Finished/LUSC.transcriptome__ht_hg_u133a__broad_mit_edu__Level_3__gene_rma__data.data.txt
ParadigmPreprocessExpression1 exonFile file:/xchip/cga/gdac-prod/tcga-gdac/jobResults/GDAC_MergeDataFilesPipeline/LUSC/1551697/2.GDAC_MergeDataFiles.Finished/LUSC.exon__huex_1_0_st_v2__lbl_gov__Level_3__quantile_normalization_gene__data.data.txt
ParadigmPreprocessExpression1 uncFile file:/xchip/cga/gdac-prod/tcga-gdac/jobResults/GDAC_MergeDataFilesPipeline/LUSC/1551609/2.GDAC_MergeDataFiles.Finished/LUSC.transcriptome__agilentg4502a_07_3__unc_edu__Level_3__unc_lowess_normalization_gene_level__data.data.txt
ParadigmPreprocess2 evidence prefix LUSC
ParadigmPreprocess2 copynumber file file:/xchip/cga/gdac-prod/tcga-gdac/jobResults/writeReducedSegments/LUSC/1590406/1.GetReducedSegments.Finished/LUSC.RS.tsv
ParadigmPrepare3 tolerance 0.001
ParadigmPrepare3 nullBatches 2
ParadigmPrepare3 minSampleFraction 0.01
ParadigmPrepare3 minGeneFraction 0.25
Paradigm4 tolerance 0.001
Execution Times:
Submitted: 18:18:54 01-08-12
Completed:
Elapsed: 07 hrs 34 mins 21 secs

step 1. ParadigmPreprocessExpression [id: 140961] Median center expression data before providing to PARADIGM.

    urn:lsid:broadinstitute.org:cancer.genome.analysis:00420:9
broadFile file:/xchip/cga/gdac-prod/tcga-gdac/jobResults/GDAC_MergeDataFilesPipeline/LUSC/1551625/2.GDAC_MergeDataFiles.Finished/LUSC.transcriptome__ht_hg_u133a__broad_mit_edu__Level_3__gene_rma__data.data.txt
exonFile file:/xchip/cga/gdac-prod/tcga-gdac/jobResults/GDAC_MergeDataFilesPipeline/LUSC/1551697/2.GDAC_MergeDataFiles.Finished/LUSC.exon__huex_1_0_st_v2__lbl_gov__Level_3__quantile_normalization_gene__data.data.txt
uncFile file:/xchip/cga/gdac-prod/tcga-gdac/jobResults/GDAC_MergeDataFilesPipeline/LUSC/1551609/2.GDAC_MergeDataFiles.Finished/LUSC.transcriptome__agilentg4502a_07_3__unc_edu__Level_3__unc_lowess_normalization_gene_level__data.data.txt
broadNormalsFile
exonNormalsFile
uncNormalsFile
Output Files:
 RunR.sh
 selectedExpressionFile.txt
 normalizedExpression.txt
 paradigmInputs.txt
 .lsf.out
 stdout.txt
Execution Times:
Submitted: 18:18:54 01-08-12
Completed: 18:19:37 01-08-12
Elapsed: 00 hrs 00 mins 43 secs

step 2. ParadigmPreprocess [id: 140962] Preprocessing module for broad data input to PARADIGM

    urn:lsid:broadinstitute.org:cancer.genome.analysis:00366:9
evidence prefix LUSC
expression file normalizedExpression.txt
copynumber file file:/xchip/cga/gdac-prod/tcga-gdac/jobResults/writeReducedSegments/LUSC/1590406/1.GetReducedSegments.Finished/LUSC.RS.tsv
paradigm inputs paradigmInputs.txt
Output Files:
 Evidence_LUSC.zip
 .lsf.out
 stdout.txt
Execution Times:
Submitted: 18:18:54 01-08-12
Completed: 18:54:20 01-08-12
Elapsed: 00 hrs 35 mins 26 secs

step 3. ParadigmPrepare [id: 140963] Gathers data files and prepares job lists for the iterative-scatter-gather PARADIGM run.

    urn:lsid:broadinstitute.org:cancer.genome.analysis:00401:12
evidence Evidence_LUSC.zip
tolerance 0.001
nullBatches 2
pathwayZip
minSampleFraction 0.01
minGeneFraction 0.25
Output Files:
 config.txt
 configEM.txt
 params0.txt
 jobs.sh
 templateEM.sh
 clusterFiles.tar
 .lsf.out
Execution Times:
Submitted: 18:18:54 01-08-12
Completed: 19:10:35 01-08-12
Elapsed: 00 hrs 51 mins 41 secs

step 4. Paradigm [id: 140964] PARADIGM (PAthway Recognition Algorithm using Data Integration on Genomic Models)

    urn:lsid:broadinstitute.org:cancer.genome.analysis:00362:21
tolerance 0.001
clusterFilesTar clusterFiles.tar
configEM configEM.txt
templateEMScript templateEM.sh
config config.txt
jobsScript jobs.sh
paramsFile params0.txt
Output Files:
 .lsf.out
 stderr.txt
 finalParams.txt
 jobName.txt
 inferredPathwayLevels.tab
 mergeFiles.zip
 finished
 iterator.out.txt
 jobSubmissions.txt
 stdout.txt
Execution Times:
Submitted: 18:18:54 01-08-12
Completed: 01:48:59 02-08-12
Elapsed: 07 hrs 30 mins 04 secs

step 5. ParadigmReportPreprocess [id: 140965] PARADIGM Report Preprocess

    urn:lsid:broadinstitute.org:cancer.genome.analysis:00365:4
mergeFilesZip mergeFiles.zip
Output Files:
 fontList.cache
 resultPngs.zip
 resultSummary.tab
 resultTables.zip
 pngToPathwayMap.txt
 .lsf.out
 stdout.txt
Execution Times:
Submitted: 18:18:54 01-08-12
Completed: 01:51:39 02-08-12
Elapsed: 07 hrs 32 mins 44 secs

step 6. ParadigmReport [id: 140966] PARADIGM Report

    urn:lsid:broadinstitute.org:cancer.genome.analysis:00363:19
summaryTableFile resultSummary.tab
resultTablesZip resultTables.zip
resultPngsZip resultPngs.zip
pngToPathwayMapTxt pngToPathwayMap.txt
paradigmInputs paradigmInputs.txt
Output Files:
 mergeFiles_pid_100_p_summary.png
 mergeFiles_pid_110_p_summary.png
 mergeFiles_pid_101_p_summary.png
 mergeFiles_pid_107_p_summary.png
 mergeFiles_pid_106_p_summary.png
 mergeFiles_pid_104_p_summary.png
 mergeFiles_pid_109_p_summary.png
 mergeFiles_pid_105_p_summary.png
 mergeFiles_pid_10_p_summary.png
 mergeFiles_pid_102_p_summary.png
 mergeFiles_pid_108_p_summary.png
 mergeFiles_pid_103_p_summary.png
 mergeFiles_pid_114_p_summary.png
 mergeFiles_pid_115_p_summary.png
 mergeFiles_pid_118_p_summary.png
 mergeFiles_pid_123_p_summary.png
 mergeFiles_pid_124_p_summary.png
 mergeFiles_pid_128_p_summary.png
 mergeFiles_pid_125_p_summary.png
 mergeFiles_pid_112_p_summary.png
 mergeFiles_pid_111_p_summary.png
 mergeFiles_pid_116_p_summary.png
 mergeFiles_pid_119_p_summary.png
 mergeFiles_pid_11_p_summary.png
 mergeFiles_pid_122_p_summary.png
 mergeFiles_pid_113_p_summary.png
 mergeFiles_pid_126_p_summary.png
 mergeFiles_pid_129_p_summary.png
 mergeFiles_pid_117_p_summary.png
 mergeFiles_pid_120_p_summary.png
 mergeFiles_pid_127_p_summary.png
 mergeFiles_pid_14_p_summary.png
 mergeFiles_pid_23_p_summary.png
 mergeFiles_pid_131_p_summary.png
 mergeFiles_pid_22_p_summary.png
 mergeFiles_pid_17_p_summary.png
 mergeFiles_pid_19_p_summary.png
 mergeFiles_pid_130_p_summary.png
 mergeFiles_pid_16_p_summary.png
 mergeFiles_pid_134_p_summary.png
 mergeFiles_pid_20_p_summary.png
 mergeFiles_pid_15_p_summary.png
 mergeFiles_pid_12_p_summary.png
 mergeFiles_pid_1_p_summary.png
 mergeFiles_pid_133_p_summary.png
 mergeFiles_pid_25_p_summary.png
 mergeFiles_pid_24_p_summary.png
 mergeFiles_pid_135_p_summary.png
 mergeFiles_pid_18_p_summary.png
 mergeFiles_pid_27_p_summary.png
 mergeFiles_pid_13_p_summary.png
 mergeFiles_pid_21_p_summary.png
 mergeFiles_pid_26_p_summary.png
 mergeFiles_pid_39_p_summary.png
 mergeFiles_pid_36_p_summary.png
 mergeFiles_pid_28_p_summary.png
 mergeFiles_pid_2_p_summary.png
 mergeFiles_pid_38_p_summary.png
 mergeFiles_pid_29_p_summary.png
 mergeFiles_pid_41_p_summary.png
 mergeFiles_pid_45_p_summary.png
 mergeFiles_pid_37_p_summary.png
 mergeFiles_pid_30_p_summary.png
 mergeFiles_pid_46_p_summary.png
 mergeFiles_pid_35_p_summary.png
 mergeFiles_pid_33_p_summary.png
 mergeFiles_pid_3_p_summary.png
 mergeFiles_pid_44_p_summary.png
 mergeFiles_pid_32_p_summary.png
 mergeFiles_pid_31_p_summary.png
 mergeFiles_pid_42_p_summary.png
 mergeFiles_pid_43_p_summary.png
 mergeFiles_pid_40_p_summary.png
 mergeFiles_pid_34_p_summary.png
 mergeFiles_pid_79_p_summary.png
 mergeFiles_pid_55_p_summary.png
 mergeFiles_pid_66_p_summary.png
 mergeFiles_pid_68_p_summary.png
 mergeFiles_pid_71_p_summary.png
 mergeFiles_pid_58_p_summary.png
 mergeFiles_pid_4_p_summary.png
 mergeFiles_pid_52_p_summary.png
 mergeFiles_pid_54_p_summary.png
 mergeFiles_pid_56_p_summary.png
 mergeFiles_pid_6_p_summary.png
 mergeFiles_pid_72_p_summary.png
 mergeFiles_pid_77_p_summary.png
 mergeFiles_pid_50_p_summary.png
 mergeFiles_pid_73_p_summary.png
 mergeFiles_pid_74_p_summary.png
 mergeFiles_pid_76_p_summary.png
 mergeFiles_pid_69_p_summary.png
 mergeFiles_pid_5_p_summary.png
 mergeFiles_pid_67_p_summary.png
 mergeFiles_pid_62_p_summary.png
 mergeFiles_pid_53_p_summary.png
 mergeFiles_pid_49_p_summary.png
 mergeFiles_pid_70_p_summary.png
 mergeFiles_pid_61_p_summary.png
 mergeFiles_pid_60_p_summary.png
 mergeFiles_pid_57_p_summary.png
 mergeFiles_pid_64_p_summary.png
 mergeFiles_pid_78_p_summary.png
 mergeFiles_pid_75_p_summary.png
 mergeFiles_pid_59_p_summary.png
 mergeFiles_pid_63_p_summary.png
 mergeFiles_pid_48_p_summary.png
 mergeFiles_pid_65_p_summary.png
 mergeFiles_pid_47_p_summary.png
 mergeFiles_pid_51_p_summary.png
 mergeFiles_pid_96_p_summary.png
 mergeFiles_pid_9_p_summary.png
 mergeFiles_pid_94_p_summary.png
 mergeFiles_pid_98_p_summary.png
 mergeFiles_pid_7_p_summary.png
 mergeFiles_pid_88_p_summary.png
 mergeFiles_pid_87_p_summary.png
 mergeFiles_pid_81_p_summary.png
 mergeFiles_pid_84_p_summary.png
 mergeFiles_pid_80_p_summary.png
 mergeFiles_pid_97_p_summary.png
 mergeFiles_pid_92_p_summary.png
 mergeFiles_pid_86_p_summary.png
 mergeFiles_pid_95_p_summary.png
 mergeFiles_pid_83_p_summary.png
 mergeFiles_pid_90_p_summary.png
 mergeFiles_pid_91_p_summary.png
 mergeFiles_pid_85_p_summary.png
 mergeFiles_pid_89_p_summary.png
 mergeFiles_pid_82_p_summary.png
 mergeFiles_pid_93_p_summary.png
 mergeFiles_pid_104_p_summary.tab
 mergeFiles_pid_100_p_summary.tab
 mergeFiles_pid_106_p_summary.tab
 mergeFiles_pid_103_p_summary.tab
 mergeFiles_pid_101_p_summary.tab
 mergeFiles_pid_102_p_summary.tab
 mergeFiles_pid_105_p_summary.tab
 mergeFiles_pid_122_p_summary.tab
 mergeFiles_pid_111_p_summary.tab
 mergeFiles_pid_108_p_summary.tab
 mergeFiles_pid_118_p_summary.tab
 mergeFiles_pid_125_p_summary.tab
 mergeFiles_pid_127_p_summary.tab
 mergeFiles_pid_12_p_summary.tab
 mergeFiles_pid_107_p_summary.tab
 mergeFiles_pid_128_p_summary.tab
 mergeFiles_pid_11_p_summary.tab
 mergeFiles_pid_113_p_summary.tab
 mergeFiles_pid_124_p_summary.tab
 mergeFiles_pid_110_p_summary.tab
 mergeFiles_pid_10_p_summary.tab
 mergeFiles_pid_130_p_summary.tab
 mergeFiles_pid_112_p_summary.tab
 mergeFiles_pid_120_p_summary.tab
 mergeFiles_pid_119_p_summary.tab
 mergeFiles_pid_117_p_summary.tab
 mergeFiles_pid_126_p_summary.tab
 mergeFiles_pid_123_p_summary.tab
 mergeFiles_pid_116_p_summary.tab
 mergeFiles_pid_115_p_summary.tab
 mergeFiles_pid_129_p_summary.tab
 mergeFiles_pid_114_p_summary.tab
 mergeFiles_pid_109_p_summary.tab
 mergeFiles_pid_1_p_summary.tab
 mergeFiles_pid_27_p_summary.tab
 mergeFiles_pid_17_p_summary.tab
 mergeFiles_pid_22_p_summary.tab
 mergeFiles_pid_14_p_summary.tab
 mergeFiles_pid_20_p_summary.tab
 mergeFiles_pid_133_p_summary.tab
 mergeFiles_pid_16_p_summary.tab
 mergeFiles_pid_134_p_summary.tab
 mergeFiles_pid_23_p_summary.tab
 mergeFiles_pid_18_p_summary.tab
 mergeFiles_pid_19_p_summary.tab
 mergeFiles_pid_21_p_summary.tab
 mergeFiles_pid_26_p_summary.tab
 mergeFiles_pid_15_p_summary.tab
 mergeFiles_pid_135_p_summary.tab
 mergeFiles_pid_131_p_summary.tab
 mergeFiles_pid_13_p_summary.tab
 mergeFiles_pid_24_p_summary.tab
 mergeFiles_pid_25_p_summary.tab
 mergeFiles_pid_46_p_summary.tab
 mergeFiles_pid_34_p_summary.tab
 mergeFiles_pid_3_p_summary.tab
 mergeFiles_pid_2_p_summary.tab
 mergeFiles_pid_43_p_summary.tab
 mergeFiles_pid_41_p_summary.tab
 mergeFiles_pid_42_p_summary.tab
 mergeFiles_pid_31_p_summary.tab
 mergeFiles_pid_33_p_summary.tab
 mergeFiles_pid_44_p_summary.tab
 mergeFiles_pid_37_p_summary.tab
 mergeFiles_pid_38_p_summary.tab
 mergeFiles_pid_39_p_summary.tab
 mergeFiles_pid_47_p_summary.tab
 mergeFiles_pid_35_p_summary.tab
 mergeFiles_pid_32_p_summary.tab
 mergeFiles_pid_40_p_summary.tab
 mergeFiles_pid_45_p_summary.tab
 mergeFiles_pid_30_p_summary.tab
 mergeFiles_pid_29_p_summary.tab
 mergeFiles_pid_28_p_summary.tab
 mergeFiles_pid_36_p_summary.tab
 mergeFiles_pid_52_p_summary.tab
 mergeFiles_pid_62_p_summary.tab
 mergeFiles_pid_50_p_summary.tab
 mergeFiles_pid_72_p_summary.tab
 mergeFiles_pid_60_p_summary.tab
 mergeFiles_pid_48_p_summary.tab
 mergeFiles_pid_51_p_summary.tab
 mergeFiles_pid_55_p_summary.tab
 mergeFiles_pid_57_p_summary.tab
 mergeFiles_pid_69_p_summary.tab
 mergeFiles_pid_64_p_summary.tab
 mergeFiles_pid_70_p_summary.tab
 mergeFiles_pid_68_p_summary.tab
 mergeFiles_pid_5_p_summary.tab
 mergeFiles_pid_67_p_summary.tab
 mergeFiles_pid_56_p_summary.tab
 mergeFiles_pid_53_p_summary.tab
 mergeFiles_pid_73_p_summary.tab
 mergeFiles_pid_71_p_summary.tab
 mergeFiles_pid_66_p_summary.tab
 mergeFiles_pid_63_p_summary.tab
 mergeFiles_pid_54_p_summary.tab
 mergeFiles_pid_58_p_summary.tab
 mergeFiles_pid_49_p_summary.tab
 mergeFiles_pid_4_p_summary.tab
 mergeFiles_pid_59_p_summary.tab
 mergeFiles_pid_61_p_summary.tab
 mergeFiles_pid_65_p_summary.tab
 mergeFiles_pid_6_p_summary.tab
 mergeFiles_pid_75_p_summary.tab
 mergeFiles_pid_82_p_summary.tab
 mergeFiles_pid_76_p_summary.tab
 mergeFiles_pid_74_p_summary.tab
 mergeFiles_pid_80_p_summary.tab
 mergeFiles_pid_7_p_summary.tab
 mergeFiles_pid_83_p_summary.tab
 mergeFiles_pid_81_p_summary.tab
 mergeFiles_pid_78_p_summary.tab
 mergeFiles_pid_79_p_summary.tab
 mergeFiles_pid_77_p_summary.tab
 mergeFiles_pid_87_p_summary.tab
 mergeFiles_pid_98_p_summary.tab
 mergeFiles_pid_93_p_summary.tab
 mergeFiles_pid_91_p_summary.tab
 mergeFiles_pid_85_p_summary.tab
 mergeFiles_pid_97_p_summary.tab
 mergeFiles_pid_86_p_summary.tab
 mergeFiles_pid_96_p_summary.tab
 mergeFiles_pid_84_p_summary.tab
 mergeFiles_pid_89_p_summary.tab
 mergeFiles_pid_88_p_summary.tab
 mergeFiles_pid_90_p_summary.tab
 mergeFiles_pid_9_p_summary.tab
 mergeFiles_pid_94_p_summary.tab
 mergeFiles_pid_95_p_summary.tab
 mergeFiles_pid_92_p_summary.tab
 nozzle.RData
 nozzle.html
 .lsf.out
 stdout.txt
Execution Times:
Submitted: 18:18:54 01-08-12
Completed: 01:53:12 02-08-12
Elapsed: 07 hrs 34 mins 17 secs