# lawbench / lawbench-2-6-8-zero-shot

- taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md)
- difficulty: medium
- category: legal NLP benchmark
- language: 
- runnable from the site: no
- agent timeout: 3600s

## Results by harness

_none yet_

## Instruction

```
You have 20 cases to process. You must answer ALL of them.
Create the file `/app/answer.jsonl` and write your output there.

OUTPUT FORMAT (STRICT, JSON Lines / ndjson):

1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines.
2. Each line must be a valid JSON object with EXACTLY two keys:
   - "id": string
   - "answer": string
     No extra keys are allowed.
3. The "id" must match the input id exactly.
4. Output must be JSON lines only:
   - No markdown fences (no ```).
   - No headings, numbering, commentary, or extra text.
   - No blank lines.
5. Output language: Chinese.
6. For each case, output ONLY the final answer text required by the question. Do not add explanations.
7. Answers must be single-line strings. Do not include line breaks.
   If the answer would normally include line breaks, replace them with a single space.
8. Do not skip any case. If you cannot answer a case, output:
   {"id":"<id>","answer":""}

Example Output (format only; do not copy the placeholder text):
{"id":"0","answer":"<这里填写对应题目的中文答案>"}
{"id":"1","answer":"<这里填写对应题目的中文答案>"}

INPUT CASES:
{"id": "0", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:3．2018年6月26日凌晨，被告人刘某某至本区金牛湖街道金山村阳山排灌站和峨眉桥西侧工地，窃得被害人赵某某停放在此的4台挖掘机油箱内的柴油530升，价值人民币3，635元。"}
{"id": "1", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:4．2018年6月27日凌晨，被告人刘某某至本区程桥街道桂花村桂花桥附近的工地，窃取被害人王某乙停放在此的10余台机械油箱内的柴油550升，价值人民币3，700元。"}
{"id": "2", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:5．2018年7月3日凌晨，被告人刘某某至本区马鞍街道城西社区郑营垃圾中转站北侧工地，窃得被害人徐某某停放在此的两台挖掘机油箱内的柴油289升，价值人民币1，900元。"}
{"id": "3", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2018年7月3日，被告人刘某某在销赃时被警察当场，归案后如实供述了上述犯罪事实。"}
{"id": "4", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:1.2018年4月23日16时许，被告人林某某来到温州市龙湾区**街道**村**市场**宿舍，将被害人谢某某的一部VIVOX9SPLUS手机和被害人杨某某的一部OPPOR11手机盗走，后销赃得人民币2000元。"}
{"id": "5", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:经鉴定，被盗OPPO手机价值人民币1200元，VIVO手机价值人民币1000元。"}
{"id": "6", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2.2018年6月16日12时许，被告人林某某进入温州市龙湾区**街道**路**栋**号即被害人施某某家中，将被害人施某某放在二楼餐桌上的一部华为平板电脑盗走。"}
{"id": "7", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:经鉴定，被盗华为平板电脑价值人民币300元。"}
{"id": "8", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:3.2018年6月16日13时许，被告人林某某进入温州市龙湾区**街道**路**弄**号即被害人潘某某家中，将放在一楼厨房灶台上的一部白色华为手机盗走。"}
{"id": "9", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:经鉴定，被盗华为手机价值人民币200元。"}
{"id": "10", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:4.2018年6月16日16时许，被告人林某某来到温州市龙湾区**街道**宿舍**室，将被害人刘某某的一部玫瑰金苹果5S手机盗走。"}
{"id": "11", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:经鉴定，被盗苹果5S手机价值人民币300元。"}
{"id": "12", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:5.2018年6月16日16时许，被告人林某某来到温州市龙湾区第三幼儿园边的田地附近，将被害人杨某某停放在此的一辆红色安儿达牌电动车盗走。"}
{"id": "13", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:经鉴定，被盗安尔达牌电动车价值人民币2193元。"}
{"id": "14", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2018年6月16日，被告人林某某被。"}
{"id": "15", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:被告人杨某某伙同潘某某，于2018年1月14日凌晨2时许，在本市茭菱路创意英国小区门口处，盗窃了被害人龚某某的钱包一个，内装现金1500元，华为mate8手机一部，及医保卡、银行卡等物品，携赃逃跑，于2018年1月14日8时许，以1400元的价格把装有医保卡及华为手机等物品的钱包向被告人李某某销赃。"}
{"id": "16", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:被告人杨某某、潘某某盗窃完成后，从杨某某、潘某某处得知被害人位置的被告人阎某某于2018年1月14日凌晨2时许，在本市茭菱路创意英国小区门口处，盗窃了被害人龚某某的挎包一个，内装宝马汽车钥匙一把（价值4000元），及华为充电器、家门钥匙等物品，携赃逃跑，将挎包销赃挥霍。"}
{"id": "17", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:被告人李某某于2018年1月14日8时30分至2018年1月15日11时20分期间，将从杨某某、潘某某处购买的被害人龚某某医保卡，分别在本市二十四家药店刷卡消费，购买累计人民币6751.5元的药品。"}
{"id": "18", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2018年1月30日16时00分许民警到本市西山区**路**村**房**楼杨某某。"}
{"id": "19", "q": "依据给出的实体类型提取句子的实体信息，实体类型包括:犯罪嫌疑人、受害人、被盗货币、物品价值、盗窃获利、被盗物品、作案工具、时间、地点、组织机构。逐个列出实体信息。\n句子:2018年1月30日15时00分许民警到本市西山区**路**网吧内将潘某某。"}
```
---
Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp