# lawbench / lawbench-3-8-9-zero-shot

- taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md)
- difficulty: medium
- category: legal NLP benchmark
- language: 
- runnable from the site: no
- agent timeout: 3600s

## Results by harness

_none yet_

## Instruction

```
You have 20 cases to process. You must answer ALL of them.
Create the file `/app/answer.jsonl` and write your output there.

OUTPUT FORMAT (STRICT, JSON Lines / ndjson):

1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines.
2. Each line must be a valid JSON object with EXACTLY two keys:
   - "id": string
   - "answer": string
     No extra keys are allowed.
3. The "id" must match the input id exactly.
4. Output must be JSON lines only:
   - No markdown fences (no ```).
   - No headings, numbering, commentary, or extra text.
   - No blank lines.
5. Output language: Chinese.
6. For each case, output ONLY the final answer text required by the question. Do not add explanations.
7. Answers must be single-line strings. Do not include line breaks.
   If the answer would normally include line breaks, replace them with a single space.
8. Do not skip any case. If you cannot answer a case, output:
   {"id":"<id>","answer":""}

Example Output (format only; do not copy the placeholder text):
{"id":"0","answer":"<这里填写对应题目的中文答案>"}
{"id":"1","answer":"<这里填写对应题目的中文答案>"}

INPUT CASES:
{"id": "0", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n保洁阿姨打扫过程中带未经允许带女儿老公上门，并且导致猫咪走失。并且现在拒绝赔偿并且猫咪的问题我应该如何追究保洁的责任？"}
{"id": "1", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n公司账户中没钱了，老板也联系不上，申请劳动仲裁后，没有缴纳的7个月社保的费用能补补交上嘛的费用能补补交上嘛？"}
{"id": "2", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n被公司告知,即使我和公司解除劳动关系,公司还是不予归还上家公司给我的离职证明请问违法了哪个法规的哪一条？"}
{"id": "3", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n公司于2月10日把我辞退，现在未经过我同意，将我的辞退公告分别挂在公司开发业务的三个网站上属于侵权吗？"}
{"id": "4", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n本来我们公司需要签订一个经济合协议，由于疫情期间没法见面，对方直接用PDF发来一个他们盖好章的文件（盖的公章和个人章都是从纸上扣出来的这样做这份协议有没有法律效力？"}
{"id": "5", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我的外地租客拖欠房租，和我吵了一架，他要退房，但是他现在老家，租客没有付房租也没有付押金请问我有看管租客物品点义务吗？"}
{"id": "6", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我们家老人去世后，他的女儿要求兄妹几个平分，但是我家一直赡养着老人，老人女儿很少在老人生病时进行照顾或者给钱"}
{"id": "7", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n四年前，公司准备上市，老板说表现好的员工可以买一些原始股，所以向公司投资了一部分钱这些钱能要回吗资了一部分钱这些钱能要回吗？"}
{"id": "8", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我把钱借给在工地上认识的一个朋友，借款时问他借款用途时他说邻近年底给工人开工资请问我可以向他的爱人和孩子要这笔借款吗“关键是他现在血糖高？"}
{"id": "9", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我们老板每个月都从公司多打钱给我们然后再要回，这违法吗我也已经辞职还每个月转账给我如果我不退他们可以起诉我的吗"}
{"id": "10", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n麻烦问一下我老丈人去世，现在要更改户主，现在想改成我是户主，麻烦问一下我需要亲自到场吗我需要亲自到场吗？"}
{"id": "11", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n签合同时说是每月按时发工资，现在拖欠一个月工资，我可以提前一个月给老板说直接解除合同吗如果老板说立马发给我我可以不要直接解除吗走人吗？"}
{"id": "12", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n合伙退股转让，净身股份转让给合伙人了，当时随便手写了一份收据式的退股转让协议还可以找当时的合伙人不？"}
{"id": "13", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n未满16岁。然后不知情的被整进盗窃团伙了都没有成年，一开始说让我去骑车玩玩然后到了才知道偷东西我啥也没拿就是在现场怎么判？"}
{"id": "14", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n甲乙为夫妻，共有财产20万元。甲有父亲和姐姐，乙有妹妹，此外双方再无亲人则根据继承法规定他们都继承多少财产？"}
{"id": "15", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我在广西买有十五年养老保险，现在浙江又买有7年养老保险，再过三年就达到退休年龄了请问我怎样接续养老保险？"}
{"id": "16", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我欠私人的钱，私人把我告上法庭，要拍卖我的房子，法院是要我过去签字确认拍卖房产是有这回事吗拍卖房产是有这回事吗？"}
{"id": "17", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我婚前父母给我买了房子，我结婚后又卖掉了，用卖房子的钱从新买了新房，加了我媳妇的名字离婚的话怎么分？"}
{"id": "18", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n就是说我们是餐饮公司，过年不放假，但是春节初一到初三上班的人给三倍工资不上班的人扣月休四天的假期正确吗？"}
{"id": "19", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我入职公司三年多了，公司到第三年才给买的养老，失业，还有医疗保险能让公司补偿前两年的没有缴纳保险的补偿吗？"}
```
---
Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp