# lawbench / lawbench-3-2-4-zero-shot

- taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md)
- difficulty: medium
- category: legal NLP benchmark
- language: 
- runnable from the site: no
- agent timeout: 3600s

## Results by harness

_none yet_

## Instruction

```
You have 20 cases to process. You must answer ALL of them.
Create the file `/app/answer.jsonl` and write your output there.

OUTPUT FORMAT (STRICT, JSON Lines / ndjson):

1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines.
2. Each line must be a valid JSON object with EXACTLY two keys:
   - "id": string
   - "answer": string
     No extra keys are allowed.
3. The "id" must match the input id exactly.
4. Output must be JSON lines only:
   - No markdown fences (no ```).
   - No headings, numbering, commentary, or extra text.
   - No blank lines.
5. Output language: Chinese.
6. For each case, output ONLY the final answer text required by the question. Do not add explanations.
7. Answers must be single-line strings. Do not include line breaks.
   If the answer would normally include line breaks, replace them with a single space.
8. Do not skip any case. If you cannot answer a case, output:
   {"id":"<id>","answer":""}

Example Output (format only; do not copy the placeholder text):
{"id":"0","answer":"<这里填写对应题目的中文答案>"}
{"id":"1","answer":"<这里填写对应题目的中文答案>"}

INPUT CASES:
{"id": "0", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明在商场购买了一只电动按摩器，但使用过程中发现按摩器存在瑕疵，多处出现失灵现象。根据哪一条法律，小明可以要求商家退货？"}
{"id": "1", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明在某超市购买了一盒酸奶，但是喝掉之后发现该酸奶已经过期，导致他出现了严重的食物中毒症状。根据相关法律规定，经营者应该承担怎样的民事责任？"}
{"id": "2", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小红在网上购买了一款手机，但是在使用过程中发现手机存在质量问题，且无法维修或更换。她希望得到解决方案。根据相关法律法规，小红应该如何处理这种情况？"}
{"id": "3", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明在购买一款产品后发现产品存在质量问题，联系厂家并未得到解决。他希望能够通过市场监督管理部门维护自己的消费者权益。根据哪一条法律法规可以保护小明的消费者权益？相关部门如何实施行政处罚？"}
{"id": "4", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明在一家超市购买了一瓶饮料，结果喝了几口后就感到口干舌燥、恶心呕吐，经过医生诊断是因为该瓶饮料中含有有害化学物质，导致了小明的身体不适。根据哪一条法律，小明可以向谁要求赔偿？"}
{"id": "5", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明购买了一件衣服，但发现有明显的瑕疵，希望能够退货或者换货。根据哪一条法律，小明可以要求退货或者换货？"}
{"id": "6", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小王是一名发明人，他的专利申请通过了实质审查，准备获得发明专利权。根据哪条法规，小王的专利申请通过实质审查后可以获得发明专利权？"}
{"id": "7", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明是一家大型制药公司的专利代理人，他发现另一家小型制药公司正在侵犯他的客户的发明专利。小明建议他的客户向国务院专利行政部门提出强制许可的申请。根据哪一条法律，国务院专利行政部门可以给予发明专利或实用新型专利的强制许可？"}
{"id": "8", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明在进行发明专利申请，并通过了实质审查。根据哪条法律规定，小明的发明专利权应该从何时起生效？"}
{"id": "9", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明在申请专利时提出了一种新疗法，但被告知这种治疗方法无法获得专利权。根据哪条法律，以下哪些技术不可获得专利权？"}
{"id": "10", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:某地政府拍卖委托的土地被违法处理。根据哪个法律，对违反法规擅自处理被委托的物品的主管人员和直接责任人员有何处罚和责任？"}
{"id": "11", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:在一场拍卖会上，一位竞拍者以高价竞拍了一幅画，最终拍卖师以落槌的方式确认了竞拍者的最高应价。根据法律规定，竞买人的最高应价被确认后，拍卖的状态是什么？"}
{"id": "12", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明和小李在合伙开了一家公司，但是小明因为粗心大意造成公司赔了钱，导致公司欠下了巨额债务。根据哪条法律，小明和小李应该承担怎样的责任？"}
{"id": "13", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:李先生和张先生商量开设一家有限合伙企业，他们商定李先生出资100万元，而张先生出资一块价值100万元的土地使用权。根据哪条法律规定有限合伙人可以用土地使用权作为出资？"}
{"id": "14", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:张三和李四合作开了一家小型制衣厂，在某次生产中，张三因为粗心大意，导致一批大货出现缺陷，最终造成了合伙企业的债务。根据法律规定，张三应该承担什么责任？"}
{"id": "15", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明和小李一起开了一家合伙企业，但由于经营不善，负债累累，最终导致破产。此时，小明和小李需要处理合伙企业的债务，并进行资产清算。根据相关法律规定，小明和小李在处理合伙企业债务时需要注意哪些内容？"}
{"id": "16", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小石和小李合伙开了一家餐馆，但合伙协议中没有约定合伙期限。小石不再想参与经营，想退伙。根据哪条法律规定，小石可以退伙？需要向其他合伙人提前通知多久？"}
{"id": "17", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:某个合伙企业清算时，清算人在未清偿债务前擅自分配企业的财产，致使债权人未能获得应有的清偿，引发了债权人的投诉。根据哪条法律规定，清算人的这种行为构成什么样的行为？"}
{"id": "18", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明和小红共同经营一个网店，小明负责采购和物流，小红负责客服和账务。最近小明私自将网店库存的一部分货物转移到了自己的私人仓库中，导致网店无法及时发货，影响了客户的购物体验和网店的信誉。根据哪条法律规定，小明私自将网店货物转移导致的损失应该由他承担？"}
{"id": "19", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:一家合伙企业发生了地址变更。根据哪个法律条款，合伙人应当向企业登记机关申请办理变更登记？"}
```
---
Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp
