# lawbench / lawbench-3-8-1-zero-shot

- taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md)
- difficulty: medium
- category: legal NLP benchmark
- language: 
- runnable from the site: no
- agent timeout: 3600s

## Results by harness

_none yet_

## Instruction

```
You have 20 cases to process. You must answer ALL of them.
Create the file `/app/answer.jsonl` and write your output there.

OUTPUT FORMAT (STRICT, JSON Lines / ndjson):

1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines.
2. Each line must be a valid JSON object with EXACTLY two keys:
   - "id": string
   - "answer": string
     No extra keys are allowed.
3. The "id" must match the input id exactly.
4. Output must be JSON lines only:
   - No markdown fences (no ```).
   - No headings, numbering, commentary, or extra text.
   - No blank lines.
5. Output language: Chinese.
6. For each case, output ONLY the final answer text required by the question. Do not add explanations.
7. Answers must be single-line strings. Do not include line breaks.
   If the answer would normally include line breaks, replace them with a single space.
8. Do not skip any case. If you cannot answer a case, output:
   {"id":"<id>","answer":""}

Example Output (format only; do not copy the placeholder text):
{"id":"0","answer":"<这里填写对应题目的中文答案>"}
{"id":"1","answer":"<这里填写对应题目的中文答案>"}

INPUT CASES:
{"id": "0", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我家的房子出现山体滑坡，自己的土地不适合建房，村委会以没有集体土地，不批宅基地自己又买不起商品房怎么办批宅基地自己又买不起商品房怎么办？"}
{"id": "1", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n婚后男方一直在外工作，孩子四岁半一直随我生活，男方不给孩子抚养费，现在起诉离婚之前主动放弃不要小孩几次？"}
{"id": "2", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我要把我名下的土地承包到2057年，可是土地使用证是到2027年12年31日我怎么才能把土地承包出去？"}
{"id": "3", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我妈8月30日下班回家路上车祸身亡，她所上班公司工资才发到六月份他们公司说得按月发这种是否是违法行为？"}
{"id": "4", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我和我老公分开已经5年了，一直没有办理离婚手续，这么多年他也没有给过我一分钱如果离婚我有权益向他要经济赔偿吗？"}
{"id": "5", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n就是我是一名学生，因为高考，原来的地址改了名字，现在学校要我们的户口本和身份证上的地址一致我想去改户口本的地址该怎么办？"}
{"id": "6", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n员工还有两年退休，工作已经半年一直未签合同，老板几次逼员工离职，员工拒绝请问员工有权要去签订两年或三年合同吗？"}
{"id": "7", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n想问下，房租合同已经签了是一年的，押金交了，然后房租只付了一个月（房东要求半年付现在还可以要求房东退租吗？"}
{"id": "8", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n咨询房屋装修发生的纠纷；今年7月与个人装修师达成房屋装修的意愿，并承诺我们9月可以完工可以诉讼当事人退款或者进行补偿吗？"}
{"id": "9", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n最高额抵押合同，抵押物是公司名下房产，应该就签一个抵押人，但在签合同时多加了一个抵押人可以起诉第一个抵押人吗？"}
{"id": "10", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n请问这合理吗,因为肇事逃逸,一个星期后狗主人要求赔偿8000,冲出来一只狗撞上后开车离去,晚上十字路口?"}
{"id": "11", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我朋友的一辆摩托车挂在我的名下,他把车卖了没过户已经脱审了,怎么我朋友的一辆摩托车挂在我的名下怎么办？"}
{"id": "12", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我现在和前妻离婚了，贷款房归我了，贷款时她的名字，有房租归我的协议，我不想联系她了2023贷款就还完了怎样才能我直接落到我名下？"}
{"id": "13", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我是骑电瓶车载人直行被对方从停车场出来左转撞到，交警判我次责，承担对方小车20%修车费我应该怎么办？"}
{"id": "14", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n公司把生产装置承包给不具备资质的自然人，发生安全事故死亡2人，公司应该承担什么责任公司的主要负责人承担什么责任？"}
{"id": "15", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n寒假在公司签了份合同，合同上盖的章跟他本来的公司名字不符，并且合同上盖的公司名字在企查查查不到该公司这个合同有用吗？"}
{"id": "16", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n有农村父母出资自建房三楼两间，后产权人登记为弟弟，我作为哥哥可以与他签财产分割协议吗财产分割协议吗？"}
{"id": "17", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我和男朋友在婚前买的房，写了两个人的名字，走的商业贷款，婚后可以转为公积金贷款吗可以转为公积金贷款吗？"}
{"id": "18", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我跟他是协议离婚，我们有一个小孩孩子归我，婚前他有一套按揭房贷款至今还没有还完也自愿给我孩子的抚养费他每月出2000能不能帮忙拟草一份离婚协议书？"}
{"id": "19", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n和培训机构签订了一个合同，前期沟通时一直咨询的是学校的学费，上周确认时得知是培训学校的培训费属于重大误解可撤销吗？"}
```
---
Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp