# lawbench / lawbench-2-4-13-one-shot - taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md) - difficulty: medium - category: legal NLP benchmark - language: - runnable from the site: no - agent timeout: 3600s ## Results by harness _none yet_ ## Instruction ``` You have 20 cases to process. You must answer ALL of them. Create the file `/app/answer.jsonl` and write your output there. OUTPUT FORMAT (STRICT, JSON Lines / ndjson): 1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines. 2. Each line must be a valid JSON object with EXACTLY two keys: - "id": string - "answer": string No extra keys are allowed. 3. The "id" must match the input id exactly. 4. Output must be JSON lines only: - No markdown fences (no ```). - No headings, numbering, commentary, or extra text. - No blank lines. 5. Output language: Chinese. 6. For each case, output ONLY the final answer text required by the question. Do not add explanations. 7. Answers must be single-line strings. Do not include line breaks. If the answer would normally include line breaks, replace them with a single space. 8. Do not skip any case. If you cannot answer a case, output: {"id":"<id>","answer":""} Example Output (format only; do not copy the placeholder text): {"id":"0","answer":"<这里填写对应题目的中文答案>"} {"id":"1","answer":"<这里填写对应题目的中文答案>"} INPUT CASES: {"id": "0", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n另一半在拆迁房产证未拿到时,私下买卖拆迁房,法律承认吗"} {"id": "1", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n几年前我与丈夫离婚,现在只是有户口,想问一下将来村里拆迁是否可以分到房"} {"id": "2", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我们土地被人承包。134亩。硬化我们33亩这个他们"} {"id": "3", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n农村集体矿山需征迁,有相应的补偿价目吗"} {"id": "4", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我家是为矿区下沉动迁,然后说要补偿楼房,但是要给钱,一个农村的,动迁不动地以后地怎么办?"} {"id": "5", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我家房屋是父亲留下来的,面临拆迁,只有我两夫妻签字了,三个姐姐又要房子怎么分配?"} {"id": "6", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我家的房子是棚改项目要拆迁的。但是丈量的面积不合理。他们把挑梁和楼道都不算我想问问他们有权这么做吗?"} {"id": "7", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我是105国道拆迁户,由于我本镇无法提供安置,在其他乡镇购买地基是否可以盖房"} {"id": "8", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n村里修广场占地,什么时候能给补偿"} {"id": "9", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我老家的山被征收了,一分钱没有补到,我该怎么办?"} {"id": "10", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n借出去50万,对方人跑了,找不到了。房子的拆迁款让他两个儿子分摊。该怎么办"} {"id": "11", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我家土地被国家征收,以前我爸租出几亩地,1万1亩租的有个人合同,无年期请问这样合里吗?"} {"id": "12", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n2018年11月1号,我家有一处老宅子,现在上面没有房子了,我现在想重新建起来这种情况可以吗?"} {"id": "13", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我的回迁合同上的补偿金额被涂改了,回迁合同能随意涂改吗,拆迁是我叔叔一手经办的"} {"id": "14", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n南通公婆的宅基地拆迁,我跟老公还有女儿的户口都在拆迁房,我也是因为拆迁"} {"id": "15", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我在运货时,被工商局查了,货也被扣了,运得假商品,不知道是发多少罚款发多少罚款?"} {"id": "16", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n矿长利用职权欺负工人,强制工人,软禁工人"} {"id": "17", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n交警队事故科里面设的调解室,调解收一千元钱合适吗"} {"id": "18", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n时效超期上诉,因当事人一直推委不给决(也不是坚决不解决)拖延了3年多一审当事人以时效超期"} {"id": "19", "q": "确定以下咨询的类别,每个咨询仅属于一个类别,类别包括:婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和<eoa>之间,例如[类别]婚姻家庭<eoa>。请严格按照这个格式回答。\n下面是一个例子:\n咨询:交通事故中,保险公司及肇事者司机方全部不闻不问。把伤者拖在医院,一直由家属自行在治疗请问律师该如何处理?\n答案:[类别]婚姻家庭<eoa>\n请你回答:\n咨询:\n我是8月29号到运城市XX门口维权,盐湖区XXA带队野蛮执法现在做法医签定在闻喜可以吗?"} ``` --- Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp