gpt-4-turbo-2024-04-09+cotclaude-3-opus-20240229+cotgpt-4-0613+cotgpt-4o+cotllama3-405-cotgpt-4ogpt-4-0613gpt-4-turbo-2024-04-09claude-3-opus-20240229llama3-405gpt-3.5-turbo-0613+cotdeepseek-instruct-33bgpt-3.5-turbo-0613deepseek-base-33bcodetulu-2-34bmagicoder-ds-7bcodellama-34b+cotdeepseek-base-6.7bwizard-34bcodellama-34bcodellama-python-34bwizard-13bdeepseek-instruct-6.7bmixtral-8x7bcodellama-python-13bcodellama-13bphindcodellama-13b+cotcodellama-python-7bmistral-7bcodellama-7bstarcoderbase-16bphi-2starcoderbase-7bdeepseek-base-1.3bcodellama-7b+cotdeepseek-instruct-1.3bphi-1.5phi-1CRUXEval-output/112CRUXEval-output/340CRUXEval-output/35CRUXEval-output/136CRUXEval-output/158CRUXEval-output/240CRUXEval-output/376CRUXEval-output/159CRUXEval-output/624CRUXEval-output/58CRUXEval-output/303CRUXEval-output/712CRUXEval-output/73CRUXEval-output/598CRUXEval-output/31CRUXEval-output/17CRUXEval-output/754CRUXEval-output/53CRUXEval-output/360CRUXEval-output/50CRUXEval-output/463CRUXEval-output/132CRUXEval-output/734CRUXEval-output/45CRUXEval-output/55CRUXEval-output/583CRUXEval-output/105CRUXEval-output/743CRUXEval-output/536CRUXEval-output/356CRUXEval-output/329CRUXEval-output/508CRUXEval-output/593CRUXEval-output/52CRUXEval-output/615CRUXEval-output/47CRUXEval-output/367CRUXEval-output/16CRUXEval-output/189CRUXEval-output/96CRUXEval-output/641CRUXEval-output/56CRUXEval-output/176CRUXEval-output/63CRUXEval-output/351CRUXEval-output/675CRUXEval-output/187CRUXEval-output/428CRUXEval-output/628CRUXEval-output/116CRUXEval-output/279CRUXEval-output/431CRUXEval-output/579CRUXEval-output/7
00.20.40.60.81pass1_exmodelexample_id