# lawbench / lawbench-3-8-23-zero-shot

- taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md)
- difficulty: medium
- category: legal NLP benchmark
- language: 
- runnable from the site: no
- agent timeout: 3600s

## Results by harness

_none yet_

## Instruction

```
You have 20 cases to process. You must answer ALL of them.
Create the file `/app/answer.jsonl` and write your output there.

OUTPUT FORMAT (STRICT, JSON Lines / ndjson):

1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines.
2. Each line must be a valid JSON object with EXACTLY two keys:
   - "id": string
   - "answer": string
     No extra keys are allowed.
3. The "id" must match the input id exactly.
4. Output must be JSON lines only:
   - No markdown fences (no ```).
   - No headings, numbering, commentary, or extra text.
   - No blank lines.
5. Output language: Chinese.
6. For each case, output ONLY the final answer text required by the question. Do not add explanations.
7. Answers must be single-line strings. Do not include line breaks.
   If the answer would normally include line breaks, replace them with a single space.
8. Do not skip any case. If you cannot answer a case, output:
   {"id":"<id>","answer":""}

Example Output (format only; do not copy the placeholder text):
{"id":"0","answer":"<这里填写对应题目的中文答案>"}
{"id":"1","answer":"<这里填写对应题目的中文答案>"}

INPUT CASES:
{"id": "0", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n绩效问题，公司绩效奖金考核中有三千多属于虚假绩效（公司的基本任务是完成的每天也在岗）请问现在公司可以行使权力有什么？"}
{"id": "1", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n关于离职承诺书要求，因劳动关系产生的所有义乌均已全部履行，本人承诺不以任何理由向公司主张任何权利（包含但不限于提起劳动仲裁"}
{"id": "2", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我是女方，之前家里出首付买了一套房，目前是个人在还贷，房产证一直没有办理这属于婚前财产还是婚后财产？"}
{"id": "3", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n工作期间突发疾病抢救超出48小时死亡，但48内已经没有生命体征，没有自主呼吸是否可以认定为工伤工亡？"}
{"id": "4", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我签约了个私立学校，劳动合同里写未满一年离职的话，要赔付学校两万元如果我未满一年离职真的需要赔付吗？"}
{"id": "5", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我工作八年了，周六周日加班公司只付了152的加班工资，今天下午通知我合同到期了不再续签了我这加班工资公司是不是应该补偿给我？"}
{"id": "6", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n医社保停缴了，之前有交满一年，户口是永泰的，目前处于自创业阶段，可以申请保障性租赁住房吗请保障性租赁住房吗？"}
{"id": "7", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我在2月2日时受到了恐吓，他上门辱骂了我，并且不断踹门，我当时受到了很大的惊吓没能报警他会受到惩罚吗？"}
{"id": "8", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我在公司工作了15年到了退休年龄，工司买够15年社保我可以要求延迟到买够社保再退休可以吗够社保再退休可以吗？"}
{"id": "9", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n因为我是个女孩，所以刚出生就被亲生父母遗弃，由养父母抚养长大，在成年前亲生父母也没露过面可以以遗弃罪起诉他们吗？"}
{"id": "10", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n麻烦问一下，我父亲过世了，我奶奶有两个儿子其中有我父亲，但是我父亲过世了我作为孙子我有义务抚养我的奶奶吗？"}
{"id": "11", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我的车停在停车位上被撞了，然后被我发现我拽着车跑出去好远，最后体力不支被他跑了我的胳膊和腿肌肉拉伤了请问怎么办？"}
{"id": "12", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n停车场倒车不小心刮到别人的车报保险，保险通知交警定损，完后交警开了张罚单说是不规范倒车罚款100元合理吗？"}
{"id": "13", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n夫妻公司，老公法定代表人，老婆是大股东，老公以公司法人名义贷款没有用于公司日常经营的情况下老婆是否也要承担还款？"}
{"id": "14", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n普通感冒门诊输液，医生用药是不需要做皮试的药，患者猝死，医生也积极抢救了如果是自身疾病医生有没有责任？"}
{"id": "15", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n就是我的父亲农民工上个星期干活的时候摔伤了，包工头说今天领着去复查，结果关机了不接电话了该怎么找到他？"}
{"id": "16", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n户口本上现在只有我妈妈一人，子女现在都是非农户口，妈妈走后子女能继承农村的确权土地吗继承农村的确权土地吗？"}
{"id": "17", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我买了一个人的东西，当时不知道是假货，然后卖给第二个人了，第二个人又卖出去了金额不到500会立案啥的吗？"}
{"id": "18", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我和前女友在一起的时候，她帮我带了些贷款，当时我是说的我来还，但是这个钱被来是准备用来做生意的我什么都没得到？"}
{"id": "19", "q": "请回答下列问题，首先给出回答，然后给出对应的法律依据: \n我问一下我是20年前办的结婚证，但是我老公的户口变更过两次，而且每次变更年龄地址都有改变那结婚证需要怎么弄不呢？"}
```
---
Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp