# lawbench / lawbench-2-1-18-zero-shot

- taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md)
- difficulty: medium
- category: legal NLP benchmark
- language: 
- runnable from the site: no
- agent timeout: 3600s

## Results by harness

_none yet_

## Instruction

```
You have 20 cases to process. You must answer ALL of them.
Create the file `/app/answer.jsonl` and write your output there.

OUTPUT FORMAT (STRICT, JSON Lines / ndjson):

1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines.
2. Each line must be a valid JSON object with EXACTLY two keys:
   - "id": string
   - "answer": string
     No extra keys are allowed.
3. The "id" must match the input id exactly.
4. Output must be JSON lines only:
   - No markdown fences (no ```).
   - No headings, numbering, commentary, or extra text.
   - No blank lines.
5. Output language: Chinese.
6. For each case, output ONLY the final answer text required by the question. Do not add explanations.
7. Answers must be single-line strings. Do not include line breaks.
   If the answer would normally include line breaks, replace them with a single space.
8. Do not skip any case. If you cannot answer a case, output:
   {"id":"<id>","answer":""}

Example Output (format only; do not copy the placeholder text):
{"id":"0","answer":"<这里填写对应题目的中文答案>"}
{"id":"1","answer":"<这里填写对应题目的中文答案>"}

INPUT CASES:
{"id": "0", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n上诉人陈军平及其委托代理人华立东,被上诉人长通实业公司的伪托代理人赵玉河,被上诉人信达财险河南公司的委托代理人代丽霞到庭参加了诉讼"}
{"id": "1", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n或者新用人单位向劳动者提出解除、终止劳动合同，在算计支付经济补偿或赔偿金的工作年限时，"}
{"id": "2", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n被上诉人（被告）：李真真，女，1989年10月5日出生，汉族，住安徽省亳州市谯城区。"}
{"id": "3", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n一九八○年一月二十五日青岛市革命委员会公布的《青岛市人民防空公示维护管理试行办法》同时废者。"}
{"id": "4", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n因被告未为原告办劵理社会保险，未与原告订立书面劳动合同，原告于2013年12月11日与被告解除劳动关系。"}
{"id": "5", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n2021年7月29日，被害人杜某某在网上贷款被骗10000元转转进韦进韦兰宵工行卡（尾号****）内。"}
{"id": "6", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n离职前12个月平钧工资：1，566.67元［（1，500元×4个月＋1，600元×8个月）÷12个月］。"}
{"id": "7", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n诉讼请求:1.请求确认原告(并案被告)与被告(并案原告)不存在劳动关系;2.请求判令原告(并案被告)不为被告(并案原告)办理杨老、医疗保险"}
{"id": "8", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n上述证据收集程序合法，内容客观真实，足以认定指控实事。"}
{"id": "9", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n依照《中华人民共和国刑法》第五条、第六十一条的规定，建议判处被告人黄某某拘役一个月零十日，缓刑二个月，并处罚金人民币三千伍百元。"}
{"id": "10", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n(四)检查有关劳动模范欺压的洛市情况，提出调整劳动模范政策的建议方案；"}
{"id": "11", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n综上所述，由由酒店解除劳动合同的行为合法有据，俞耀华要求由由酒店承担违法解除赔偿责任的上诉请求，本院不予支持。"}
{"id": "12", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n鹤壁市鹤山区人民法院一审认为：《最高人民法院关于审理劳动争议案件适用法律若干问题解释》第一条第（三）项规定，劳动者退休后，"}
{"id": "13", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n本案案件受理费人民币10元，由原告刘义凯担负。"}
{"id": "14", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n本案中，张四X自2009年就在原告单位工作，虽然未签订劳动合同，但已形成了事实劳动关系"}
{"id": "15", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n赵忠上诉称：哈中院（2013）哈民一民终字第181号民事判决确认了劳动合同终止前十二个月实发工资2，800元，该标准是在扣除各中社会保险及其他费用后的净额"}
{"id": "16", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n本院认为，被告人许奎全以非法占有为目的，盗窃他人财物，数额较大，其行为触犯了《中华人民共和国刑法》第二百六十四条，犯罪事实清楚，证据确实、充分，应当盗窃罪追究其刑事责任。"}
{"id": "17", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n因劳动合同需企业与职工协商致方能搭乘，是双方的自愿欣慰，"}
{"id": "18", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n原告张维建与被告四川春雷钢结构有限公司（以下简称春雷公司）社会保险纠纷一案，本院于2013年12月3日立案受理。依法由审判员刘军适用简易成序独任审判，公开开庭进行了审理。原告张维建及委托代理人肖方菊，被告的委托代理人邱崇勇到庭参加诉讼。本案现已审理终结。"}
{"id": "19", "q": "纠正下面法律文书句子中字词的拼写、冗余、缺失、乱序错误，尽量减少对原句的修改，保留原句语义。只需要给出修改后的句子，请你严格按照这个格式回答。句子：\n（行政处分）本市单位或者组织为申请涉外婚姻登记的当事人出具虚假证件或者虚假证明的，由市民政局予以没收，并可建议该单位或者组织对直接责任人员给予行政处分。"}
```
---
Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp