# lawbench / lawbench-3-8-2-zero-shot

- taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md)
- difficulty: medium
- category: legal NLP benchmark
- language: 
- runnable from the site: no
- agent timeout: 3600s

## Results by harness

_none yet_

## Instruction

```
You have 20 cases to process. You must answer ALL of them.
Create the file `/app/answer.jsonl` and write your output there.

OUTPUT FORMAT (STRICT, JSON Lines / ndjson):

1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines.
2. Each line must be a valid JSON object with EXACTLY two keys:
   - "id": string
   - "answer": string
     No extra keys are allowed.
3. The "id" must match the input id exactly.
4. Output must be JSON lines only:
   - No markdown fences (no ```).
   - No headings, numbering, commentary, or extra text.
   - No blank lines.
5. Output language: Chinese.
6. For each case, output ONLY the final answer text required by the question. Do not add explanations.
7. Answers must be single-line strings. Do not include line breaks.
   If the answer would normally include line breaks, replace them with a single space.
8. Do not skip any case. If you cannot answer a case, output:
   {"id":"<id>","answer":""}

Example Output (format only; do not copy the placeholder text):
{"id":"0","answer":"<这里填写对应题目的中文答案>"}
{"id":"1","answer":"<这里填写对应题目的中文答案>"}

INPUT CASES:
{"id": "0", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n房子是父母出资买的，房产证写的是儿子的名字，有简单的证明说房子是父母的父母还能将房产收回嘛父母还能将房产收回嘛"}
{"id": "1", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n公司未宣布破产，对员工宣称提前放假，但实际上老板觉得效益不好准备结束不干这种情况下我们员工可以要求公司经济补偿吗？"}
{"id": "2", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n合同规定我需要提前一个月交下一季度的房租，但下一季度我不想租了，只住完这个季度那我现在还是要提前交下一季度的钱吗？"}
{"id": "3", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我是灵活就业交的养老保险交了5年了，后来因为经济原因停了2年了，那以前没交的2年等我有钱去补交可以吗？"}
{"id": "4", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我报专本套读后想退学，然后那些老师说要我交15%的管理费嗯，然后再给我协议书我自己打印然后填写好之后拍照给他们是不是真的？"}
{"id": "5", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n夫妻经过庭外调解双方同意离婚法官说需要300元费用，下午接到法院通知说要4600元费用还说不要告诉法官我不知道怎么了请问一下您谢谢？"}
{"id": "6", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我与公司签了培训协议，但没有一式两份，只有公司有，我没有，培训费用在两万到三万之间需赔偿多少万到三万之间需赔偿多少？"}
{"id": "7", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n是这样的我父亲曾经欠债，然后法院都下了裁决书了，上面写的就是让他给15000元我父亲糊涂不知道多少元？"}
{"id": "8", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n如果用公积金贷款买房过了两年之后不在公司工作了，那公积金可能处于断缴状态那么这个房子的贷款会有什么影响吗？"}
{"id": "9", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n75年的女性职工，现在只交了五年半社保，到55岁退休刚刚好满15年单位就不能在帮50岁的职工买社保了是不是？"}
{"id": "10", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n房屋买卖合同与转让合同有什么区别，在买二手房时，与主人到底该签订买卖合同还是转让合同同还是转让合同？"}
{"id": "11", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我在单位签了五年合同，到期以后单位已没活了就不和我签合同，就要给我补偿1500元五年让我去单位签字解除合同合法吗？"}
{"id": "12", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n国外邮寄到深圳一台血糖仪，需要上关税吗？关税起征点是多少欧元？假设该血糖仪发票价羽20欧元大概需要交多少人民币的税？"}
{"id": "13", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n员工离职当月不满一个月，老板未告知员工就减员社保未交是否违法员工如何维护自己的权利是否可以以当月社保换成补贴"}
{"id": "14", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n肇事者车过中线撞人经抢救无效死亡，出库事故认定和车速有关系吗？应当多长时间出库事故认定书当多长时间出库事故认定书？"}
{"id": "15", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我想了解养老保险，我是农村可户口迁出城镇居民又不想交那个好几千而且每年都会上涨那个社保我想问城镇也可以交农村那个养老险吗还是城镇有其它不那么贵的养老险"}
{"id": "16", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我跟前女友分手，她欠我15000块钱，现在她跟别人结婚了，还没还我，我现在找不到她人这样我可以要回钱吗？"}
{"id": "17", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n单位裁员，统一按五千块钱一年工龄补偿，我上年十二个月平均工资是七千，我可以要求单位按七千一年工龄补偿给我吗"}
{"id": "18", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n休产假期间，公司裁员，可以得倒哪些赔偿？1、基本赔偿金，2N2、产假期间工资社保公积金缴纳3、哺乳期间工资4、产检报销生育津贴5、剩余年假以上5项都可以申请吗？"}
{"id": "19", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n一成年人在非机动车道路逆向行驶，与一正向行驶的未满16周岁孩子所骑电瓶车发生碰撞事故应如何认定事故责任？"}
```
---
Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp