gpt-4-turbo-2024-04-09+cotgpt-4o+cotgpt-4-0613+cotclaude-3-opus-20240229+cotllama3-405-cotgpt-4-0613gpt-4-turbo-2024-04-09llama3-405gpt-4oclaude-3-opus-20240229gpt-3.5-turbo-0613+cotcodellama-34b+cotcodetulu-2-34bgpt-3.5-turbo-0613codellama-13b+cotcodellama-34bphinddeepseek-base-33bdeepseek-instruct-33bcodellama-python-34bwizard-34bcodellama-13bdeepseek-base-6.7bmagicoder-ds-7bcodellama-7b+cotcodellama-python-13bmixtral-8x7bdeepseek-instruct-6.7bcodellama-python-7bwizard-13bcodellama-7bmistral-7bphi-2starcoderbase-16bstarcoderbase-7bdeepseek-base-1.3bdeepseek-instruct-1.3bphi-1.5phi-1CRUXEval-input/112CRUXEval-input/545CRUXEval-input/391CRUXEval-input/491CRUXEval-input/570CRUXEval-input/640CRUXEval-input/517CRUXEval-input/189CRUXEval-input/399CRUXEval-input/211CRUXEval-input/703CRUXEval-input/672CRUXEval-input/555CRUXEval-input/367CRUXEval-input/776CRUXEval-input/7CRUXEval-input/775CRUXEval-input/114CRUXEval-input/643CRUXEval-input/337CRUXEval-input/71CRUXEval-input/694CRUXEval-input/388CRUXEval-input/357CRUXEval-input/18CRUXEval-input/727CRUXEval-input/35CRUXEval-input/126CRUXEval-input/658CRUXEval-input/471CRUXEval-input/751CRUXEval-input/629CRUXEval-input/593CRUXEval-input/323CRUXEval-input/1CRUXEval-input/659CRUXEval-input/441CRUXEval-input/255CRUXEval-input/0CRUXEval-input/426CRUXEval-input/169CRUXEval-input/524CRUXEval-input/353CRUXEval-input/127CRUXEval-input/589CRUXEval-input/22CRUXEval-input/725CRUXEval-input/397CRUXEval-input/632CRUXEval-input/122CRUXEval-input/605CRUXEval-input/143CRUXEval-input/519CRUXEval-input/781
00.20.40.60.81pass1_exmodelexample_id