# lawbench / lawbench-2-4-6-one-shot - taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md) - difficulty: medium - category: legal NLP benchmark - language: - runnable from the site: no - agent timeout: 3600s ## Results by harness _none yet_ ## Instruction ``` You have 20 cases to process. You must answer ALL of them. Create the file `/app/answer.jsonl` and write your output there. OUTPUT FORMAT (STRICT, JSON Lines / ndjson): 1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines. 2. Each line must be a valid JSON object with EXACTLY two keys: - "id": string - "answer": string No extra keys are allowed. 3. The "id" must match the input id exactly. 4. Output must be JSON lines only: - No markdown fences (no ```). - No headings, numbering, commentary, or extra text. - No blank lines. 5. Output language: Chinese. 6. For each case, output ONLY the final answer text required by the question. Do not add explanations. 7. Answers must be single-line strings. Do not include line breaks. If the answer would normally include line breaks, replace them with a single space. 8. Do not skip any case. If you cannot answer a case, output: {"id":"","answer":""} Example Output (format only; do not copy the placeholder text): {"id":"0","answer":"<这里填写对应题目的中文答案>"} {"id":"1","answer":"<这里填写对应题目的中文答案>"} INPUT CASES: {"id": "0", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n办理取保候审需要满足哪些条件？"} {"id": "1", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n你好 我想问一下盗窃累犯一千五 要判多久自手"} {"id": "2", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n男女朋友交往中，怎么样可以认定女方存在欺诈行为，什么证据可以判定她诈骗我"} {"id": "3", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n我开超市没有证查走了十几万的烟把人也拘了我想问一下会被判刑吗"} {"id": "4", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n被武汉XX骗了1800，自称是情感咨询机构，现在找不到人"} {"id": "5", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n土地流转没有合同，但是已经耕种了23年！对方通过一些手段打赢了官司，现在要求还回之前流转的土地这样合理吗？"} {"id": "6", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n甲方转让地产，与乙方签约，合同约定一，签合同日，乙方付二百万定金给甲方律师怎样处理？"} {"id": "7", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n旅游公司给我们定错了机票，使我们不能按期回家"} {"id": "8", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n签定承诺书，询问了本人要不要代签，本人可以，这样代签了名字。代签人需要付责任吗付责任吗？"} {"id": "9", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n恢复限制民事能力监护人写委托书以后，签合同是当事人自己签的，合同有违章行为及一审中工作不到位"} {"id": "10", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n刚签约网约租车合同，由于公司帮我注册平台没有成功，叫我等，已3天了，一单没接算违约吗？"} {"id": "11", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n商铺买卖合同写的土地使用权是2015年至2074年但岀来的不动产登记证的使用期限是至2044年、去找他他说至2074年是整块地的使用年限、但商铺是没有那么多年的要不就退房、但是商铺是2015年买的考虑到货币贬值除了退房可以叫他赔偿吗他这样是欺诈误导吗？"} {"id": "12", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n朋友签订合同需要手机号，留的我的，没事吧"} {"id": "13", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n我刚签完合同 还没有搬进去 但是因为中介公司不让转账到银行卡 需要通过x平台支付 元宝e家属于一个信贷平台"} {"id": "14", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n二手房买卖合同\n违约责任如果甲方违约除退换已收乙方的全部购房定金和购房款外如果违约会按照以上合同规定是怎么赔偿？"} {"id": "15", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n在微信上买了个手机，特价的一开始说是299第二天说让付抢购费298之后又让付603不付就不给发货"} {"id": "16", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n没有写违约金的合同毁约需要赔付违约金吗"} {"id": "17", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n您好！我是集团公司分公司调动，变更合同，拒签的话有补贴吗"} {"id": "18", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n应届毕业生与个体工商户签订三方协议可以吗，没有组织机构代码证"} {"id": "19", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n我现在辞职了，但是劳动合同上有写二个月后发放工资合理吗？"} ``` --- Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp