# lawbench / lawbench-2-6-5-zero-shot

- taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md)
- difficulty: medium
- category: legal NLP benchmark
- language: 
- runnable from the site: no
- agent timeout: 3600s

## Results by harness

_none yet_

## Instruction

```
You have 20 cases to process. You must answer ALL of them.
Create the file `/app/answer.jsonl` and write your output there.

OUTPUT FORMAT (STRICT, JSON Lines / ndjson):

1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines.
2. Each line must be a valid JSON object with EXACTLY two keys:
   - "id": string
   - "answer": string
     No extra keys are allowed.
3. The "id" must match the input id exactly.
4. Output must be JSON lines only:
   - No markdown fences (no ```).
   - No headings, numbering, commentary, or extra text.
   - No blank lines.
5. Output language: Chinese.
6. For each case, output ONLY the final answer text required by the question. Do not add explanations.
7. Answers must be single-line strings. Do not include line breaks.
   If the answer would normally include line breaks, replace them with a single space.
8. Do not skip any case. If you cannot answer a case, output:
   {"id":"<id>","answer":""}

Example Output (format only; do not copy the placeholder text):
{"id":"0","answer":"<这里填写对应题目的中文答案>"}
{"id":"1","answer":"<这里填写对应题目的中文答案>"}

INPUT CASES:
{"id": "0", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:3、2018年5月16日下午13时许，被告人黎某某伙同被告人邓某某来到本市福田区**大夏**栋门口，以上述同样方式盗窃被害人覃某某停放在该处的一辆黑白相间色深远牌电动车（经鉴定，价值人民币1333元）后逃离现场。"}
{"id": "1", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:4、2018年5月27日凌晨，被告人邓某某来到本市福田区**地铁站**出口处，趁被害人杨某某喝醉酒睡着了，将被害人杨某某身上的一部苹果6S手机(被害人自述于2017年9月份以人民币1300元购买)、一个黑色钱包（被害人自述里面有人民币60元）、一条白银项链（被害人自述于2018年1月份以人民币400元购买）盗走。"}
{"id": "2", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2018年5月28日晚上20时许，公安民警在本市龙岗区**大道（**段）**号****、宾馆**房内将被告人黎某某。"}
{"id": "3", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2018年6月1日凌晨12时29分，公安民警在本市福田区**村**坊**楼下将被告人邓某某。"}
{"id": "4", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:1、2017年10月11日，被告人肖某某将被害人曹某某带到**市**区**公路附近的格林豪泰酒店8213号房间，趁曹某某洗澡之机，将其手提包内的现金人民币700元盗走后逃匿。"}
{"id": "5", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2、2017年11月25日，被告人肖某某将被害人邵某某带到**市***区*****路汉庭酒店8415号房间，趁邵某某洗澡之机，将其手提包内的现金人民币1500元盗走后逃匿。"}
{"id": "6", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:3、2018年1月18日，被告人肖某某将被害人田某某带到**市***区*****路汉庭酒店8417号房间，趁田某某不备之机，将其手提包内的现金人民币2000元盗走后逃匿。"}
{"id": "7", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:4、2018年6月8日，被告人肖某某将被害人王某某带到山东省冠县一日租房内，趁王某某不备之机，将其手提包内的现金人民币500余元盗走后逃匿。"}
{"id": "8", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2018年6月12日被告人肖某某被归案，被告人肖某某到案后自愿如实供述自己的罪行，后委托家属赔偿被害人曹某某、田某某、王某某的经济损失并获得三人的谅解。"}
{"id": "9", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2016年5月起到同年8月28日期间，被告人朱某某多次在眉山市东坡区盗窃移动、联通和铁塔公司各基站内的蓄电池，并雇请骑火三轮车的张某某，骑人力三轮车的伍某某、王某某、王某某等人将所盗窃的蓄电池卖到眉山市东坡区科工园伍某某的废旧收购站，所得钱款用于日常开支和吸食毒品。"}
{"id": "10", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:经查，被告人朱某某共盗窃15起：其中，在眉山市东坡区**路“**宾馆”楼顶，分两次盗窃移动基站中的蓄电池24个；"}
{"id": "11", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:盗窃该楼顶联通基站蓄电池4个；"}
{"id": "12", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:盗窃眉山市东坡区“**屋”楼顶电信基站蓄电池8个；"}
{"id": "13", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:盗窃眉山市东坡区**巷“**”宾馆楼顶电信基站蓄电池24个；"}
{"id": "14", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:盗窃眉山市东坡区**镇**村的联通基站蓄电池12个；"}
{"id": "15", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:盗窃眉山市东坡区**镇**村1组的联通基站蓄电池8个；"}
{"id": "16", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:盗窃眉山市东坡区**镇**居民楼楼顶联通基站蓄电池4个；"}
{"id": "17", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:盗窃眉山市东坡区**厂**联通基站蓄电池12个；"}
{"id": "18", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:与“绰号**”的男子（另案处理）一起在眉山市东坡区**街**号居民楼楼顶盗窃联通基站蓄电池4个；"}
{"id": "19", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:盗窃眉山市东坡区**局楼顶移动基站蓄电池24个；"}
```
---
Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp