# lawbench / lawbench-2-4-4-one-shot - taskset: [lawbench](https://harnessreport.com/tasks/lawbench.md) - difficulty: medium - category: legal NLP benchmark - language: - runnable from the site: no - agent timeout: 3600s ## Results by harness _none yet_ ## Instruction ``` You have 20 cases to process. You must answer ALL of them. Create the file `/app/answer.jsonl` and write your output there. OUTPUT FORMAT (STRICT, JSON Lines / ndjson): 1. `/app/answer.jsonl` must contain EXACTLY 20 non-empty lines. 2. Each line must be a valid JSON object with EXACTLY two keys: - "id": string - "answer": string No extra keys are allowed. 3. The "id" must match the input id exactly. 4. Output must be JSON lines only: - No markdown fences (no ```). - No headings, numbering, commentary, or extra text. - No blank lines. 5. Output language: Chinese. 6. For each case, output ONLY the final answer text required by the question. Do not add explanations. 7. Answers must be single-line strings. Do not include line breaks. If the answer would normally include line breaks, replace them with a single space. 8. Do not skip any case. If you cannot answer a case, output: {"id":"","answer":""} Example Output (format only; do not copy the placeholder text): {"id":"0","answer":"<这里填写对应题目的中文答案>"} {"id":"1","answer":"<这里填写对应题目的中文答案>"} INPUT CASES: {"id": "0", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n四年前我给我老表贷款。四万到现在连本带息都没有还，要过好多次都以没有钱来回我"} {"id": "1", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n在线等 急！\n\n你好: 请问下，我这属于民间经济纠纷吧，内容如下: 我借钱给他人，没有借据存在，只有银行转账记录可查，利率算下来的话已超过国家正常范围但是没有具体明细，但是只有说到账多少 然后多长时间还多少。平常都是通过微信协商沟通的，现在对方不愿协商解决突然性也不还钱了，最后就是说让我报警，我该以什么样的方式来处理？"} {"id": "2", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n我被一个外地人骗了二千元，我知道他的电话地址还有转账记录，可以报警吗用什么方法最有效？"} {"id": "3", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n别人欠我300万，我要了两年了没钱还，而且态度一次比一次恶劣，甚至耍无赖我该怎么办？"} {"id": "4", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n朋友在我不知情的下，贷款，担保人留的我的信息，我该怎么办，没有提供任何资料"} {"id": "5", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n是认识的朋友A他一直在炒虚拟币，九月份他多次打电话说有个事情很好到年可以放心盈利是他们老大做的准备是两年请问我们如何讨回这笔损失？"} {"id": "6", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n是这样的，我和一个朋友在外打工，本来好好的，就因为我朋友辞职以后我和他一起回家玩几天\n我想问一下这种人会不会受到法律惩罚？"} {"id": "7", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n别人欠我货款没有欠条也没有借条也没有货物签单，这样的情况该"} {"id": "8", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n请问一下正规的借条怎么写，可以介绍一下吗"} {"id": "9", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n我在QQ上。被骗了1500。 怎么办。 通过支付宝支付到别人的银行卡号"} {"id": "10", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n买房 贷款厂方有没有义务帮员工开工作证明"} {"id": "11", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n你好！我贷款一年了，利息太高，超过十二个月可以起诉小贷公司吗"} {"id": "12", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n我是一名学生，我和朋友遇见几个男生发一张卡片，说凭这张卡片去免费领东西"} {"id": "13", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n同学是大学生，在爱又米欠了八千多，家里很穷，一年收入都只有一万左右，刚与其协商被冷嘲热讽不接受协商还说是诈骗该怎么办？"} {"id": "14", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n举报成功被骗的钱能不能要回来？"} {"id": "15", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n别人打的借条五十万，但没有流水单，打官司能赢吗？"} {"id": "16", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n我老公在网络上赌博输了100多万，都是手机上各种APP借的，有些借款APP平台都关闭了可以吗？"} {"id": "17", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n借给别人钱拖着不还，今天说明天。没有写借条有转账记录，"} {"id": "18", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n欠钱不还应该怎么办，一共1500元"} {"id": "19", "q": "确定以下咨询的类别，每个咨询仅属于一个类别，类别包括：婚姻家庭、劳动纠纷、交通事故、债权债务、刑事辩护、合同纠纷、房产纠纷、侵权、公司法、医疗纠纷、拆迁安置、行政诉讼、建设工程、知识产权、综合咨询、人身损害、涉外法律、海事海商、消费权益、抵押担保。将答案写在[类别]和之间，例如[类别]婚姻家庭。请严格按照这个格式回答。\n下面是一个例子：\n咨询：交通事故中，保险公司及肇事者司机方全部不闻不问。把伤者拖在医院，一直由家属自行在治疗请问律师该如何处理？\n答案：[类别]婚姻家庭\n请你回答：\n咨询：\n我因为缺钱把车子抵押给朋友，抵押金额2.5万，月利息2000还有请问我现在可不可偷偷把车子开会来？"} ``` --- Harness Report runs agent harnesses from their GitHub repos on Harbor tasks and records every model call. Every page is also `.md` and `.json`; index: https://harnessreport.com/llms.txt · MCP: https://harnessreport.com/mcp