# lawbench / lawbench-3-2-16-zero-shot

- taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md)
- difficulty: medium
- category: legal NLP benchmark
- language: 
- runnable from the site: no
- agent timeout: 3600s

## Results by harness

_none yet_

## Instruction

```
You have 20 cases to process. You must answer ALL of them.
Create the file `/app/answer.jsonl` and write your output there.

OUTPUT FORMAT (STRICT, JSON Lines / ndjson):

1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines.
2. Each line must be a valid JSON object with EXACTLY two keys:
   - "id": string
   - "answer": string
     No extra keys are allowed.
3. The "id" must match the input id exactly.
4. Output must be JSON lines only:
   - No markdown fences (no ```).
   - No headings, numbering, commentary, or extra text.
   - No blank lines.
5. Output language: Chinese.
6. For each case, output ONLY the final answer text required by the question. Do not add explanations.
7. Answers must be single-line strings. Do not include line breaks.
   If the answer would normally include line breaks, replace them with a single space.
8. Do not skip any case. If you cannot answer a case, output:
   {"id":"<id>","answer":""}

Example Output (format only; do not copy the placeholder text):
{"id":"0","answer":"<这里填写对应题目的中文答案>"}
{"id":"1","answer":"<这里填写对应题目的中文答案>"}

INPUT CASES:
{"id": "0", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:一家生产医疗器械的公司在规定期限内未提出延续注册申请。根据法律规定，这种情况下公司的注册是否能够延续？"}
{"id": "1", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小明在一家商场买了一台电视，但发现在使用过程中出现了问题，于是他要求商场进行退货。商场表示需要先进行修理，但是小明认为修理后还是无法解决问题，坚持要求退货。根据哪个法律条款，商场应该如何处理小明的退货要求？"}
{"id": "2", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:某家餐厅在菜品介绍中标注菜品价格时误导顾客，导致顾客付费时产生争议。根据哪条法律规定，经营者在菜品介绍中误导顾客属于何种行为？"}
{"id": "3", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小红在网上购买了一款手机，但是在使用过程中发现手机存在质量问题，且无法维修或更换。她希望得到解决方案。根据相关法律法规，小红应该如何处理这种情况？"}
{"id": "4", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:某药品监督管理部门接到一份关于糖尿病血糖仪器不准确的投诉举报。根据哪条法律法规，药品监督管理部门应该如何处理这个投诉举报？"}
{"id": "5", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:一家医疗器械公司想要开展经营活动，但不清楚该如何规范自己的行为。根据相关法规，该公司需要遵循哪些规定进行医疗器械经营活动？"}
{"id": "6", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:张先生在一家医疗器械批发店购买了一些医疗器械后，发现其中有一款存在质量问题。他希望了解自己的维权途径。根据相关法律，作为医疗器械批发店的销售商，店家是否有义务在销售前对医疗器械进行严格的质量检测？"}
{"id": "7", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:一个医疗器械电商平台的客服接到了一个消费者的投诉，称购买的医疗器械存在质量问题。根据法律法规的规定，该电商平台需要遵守哪些规定？"}
{"id": "8", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:某医疗器械经营企业未按照要求提交质量管理体系年度自查报告。根据相关法律规定，对于上述情况该企业会面临什么样的处罚？"}
{"id": "9", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:某医疗器械经营企业未提交质量管理体系年度自查报告。根据哪条法律法规，该企业将面临什么处罚？"}
{"id": "10", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:某医疗器械生产企业因为产品违规被药品监督管理部门要求停产整改。根据什么进行医疗器械生产企业的分类管理呢？"}
{"id": "11", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:一家医疗器械公司正在开展新产品的设计开发。他们想向你咨询是否需要进行验证和确认程序。根据哪个法律法规，医疗器械注册人、备案人应当开展设计开发到生产的转换活动，并进行充分验证和确认？"}
{"id": "12", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:某医疗器械注册人新建了一个生产厂房，需要确保设备的合理配备和管理。根据哪条法规，医疗器械注册人需要合理配备和管理设备？"}
{"id": "13", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小李是一家医疗器械生产企业的质量管理人员，正在准备公司的信息化建设工作。根据哪条法规，负责省、自治区、直辖市药品监督管理部门需要推进医疗器械生产监督管理信息共享？"}
{"id": "14", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:医疗器械生产企业正在进行生产，突然药品监督管理部门进行了突击检查，发现该企业存在违法行为。根据哪条法律，药品监督管理部门应如何处理该企业的违法行为？"}
{"id": "15", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:一名医疗器械生产厂商正在考虑出售自己的生产许可证以获得更多的利润。根据哪篇法律法规，任何单位或个人是否可以买卖医疗器械生产许可证呢？"}
{"id": "16", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小李在药店购买感冒药，但是发现这种药在非处方药目录中并没有被发布。根据哪条法律规定，国家药品监督管理局需要负责非处方药目录的发布和调整工作？"}
{"id": "17", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:小张前往药店购买非处方药，但是药店卖给他的药并不在非处方药目录内。根据哪条法律规定国家药品监督管理局负责非处方药目录的遴选、审批、发布和调整工作？"}
{"id": "18", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:A公司注册了一款布图设计专有权，但发现B公司在未经授权的情况下使用了该布图设计，并且将其作为自己的产品进行销售。根据法律，A公司应该如何维护自己的权益？"}
{"id": "19", "q": "请根据具体场景与问题给出法律依据，只需要给出具体法条内容，每个场景仅涉及一个法条。\n场景:市场监管部门发现一家集成电路布图设计公司涉嫌侵犯知识产权。请求该公司提交意见陈述书并同意进行调解。根据相关法律规定，被请求人提交意见陈述书并同意进行调解后，行政执法委员会应当怎么做？"}
```
---
Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp