search

macanv / BERT-BiLSTM-CRF-NER

Tensorflow solution of NER task Using BiLSTM-CRF model with Google BERT Fine-tuning And private Server services
https://github.com/macanv/BERT-BiLSMT-CRF-NER
4.69k stars 1.25k forks source link

实体提取都没提取到 什么情况呀 #283

Open a461925358 opened 4 years ago

a461925358 commented 4 years ago

processed 90392 tokens with 1854 phrases; found: 1620 phrases; correct: 1492. accuracy: 97.74%; precision: 92.10%; recall: 80.47%; FB1: 85.90 COM: precision: 92.33%; recall: 98.22%; FB1: 95.18 1616 FUN: precision: 0.00%; recall: 0.00%; FB1: 0.00 4 PER: precision: 0.00%; recall: 0.00%; FB1: 0.00 0

ann22 commented 4 years ago

我也遇到这种情况，准确率和召回率都为0，请问怎么解决

Pydataman commented 4 years ago

我的也是

huicao1995 commented 4 years ago

同遇到一样的问题

macanv commented 4 years ago

蓝瘦，我在公司用这个代码训练了好几个场景的序列标注任务了，没遇到过这样的问题。难道是我运气好？ 贴一下数据格式吧。

a461925358 commented 4 years ago

我只截取一部分数据,我怀疑和类别的分布比例有关系,或者和epoch什么有关 因为有时候也会正常

伞 O 形 O 信 O 托 O 被 O 清 O 退 O 8 O 0 O 0 O 万 O 投 O 资 O 缩 O 水 O 一 O 半 O 。 O 投 O 资 O 者 O 起 O 诉 O 信 O 托 O 求 O 偿 O 法 O 院 O 怎 O 么 O 判 O ？ O 。 O 曾 O 经 O 令 O 资 O 本 O 市 O 场 O 惊 O 心 O 动 O 魄 O 的 O 伞 O 形 O 信 O 托 O 虽 O 已 O 告 O 别 O 市 O 场 O 许 O 久 O , O 但 O 其 O 清 O 理 O 所 O 引 O 起 O 的 O “ O 后 O 遗 O 症 O ” O 却 O 仍 O 是 O 余 O 音 O 未 O 了 O 。 O

1 O 2 O 月 O 9 O 日 O , O 中 O 国 O 裁 O 判 O 文 O 书 O 网 O 公 O 布 O 的 O 一 O 则 O 民 O 事 O 判 O 决 O 书 O 显 O 示 O , O 有 O 投 O 资 O 者 O 在 O 清 O 退 O 伞 O 形 O 信 O 托 O 的 O 浪 O 潮 O 中 O 遭 O 遇 O 高 O 额 O 损 O 失 O , O 本 O 金 O 缩 O 水 O 近 O 半 O , O 其 O 愤 O 而 O 向 O 中 B-COM 融 I-COM 信 I-COM 托 I-COM 提 O 起 O 诉 O 讼 O 并 O 要 O 求 O 赔 O 偿 O , O 还 O 顺 O 手 O 捎 O 上 O 开 O 户 O 券 O 商 O 华 B-COM 融 I-COM 证 I-COM 券 I-COM 一 O 同 O 作 O 为 O 被 O 告 O , O 认 O 为 O 其 O “ O 一 O 断 O 了 O 之 O ” O 的 O 方 O 式 O 将 O 或 O 有 O 损 O 失 O 变 O 为 O 实 O 际 O 损 O 失 O , O 要 O 求 O 承 O 担 O 连 O 带 O 赔 O 偿 O 责 O 任 O 。 O

由 O 于 O 一 O 审 O 法 O 院 O 以 O 伞 O 形 O 信 O 托 O 设 O 计 O 的 O 交 O 易 O 形 O 式 O 违 O 反 O 《 O 证 O 券 O 法 O 》 O 关 O 于 O 证 O 券 O 账 O 户 O 实 O 名 O 制 O 的 O 规 O 定 O 为 O 由 O , O 将 O 相 O 关 O 信 O 托 O 合 O 同 O 认 O 定 O 为 O 无 O 效 O , O 且 O 部 O 分 O 支 O 持 O 投 O 资 O 者 O 诉 O 求 O , O 因 O 此 O 在 O 二 O 审 O 中 O 中 B-COM 融 I-COM 信 I-COM 托 I-COM 与 O 投 O 资 O 者 O 均 O 提 O 起 O 上 O 诉 O 。 O 不 O 过 O , O 在 O 二 O 审 O 中 O , O 伞 O 形 O 信 O 托 O 的 O 合 O 同 O 效 O 力 O 仍 O 未 O 得 O 到 O 法 O 院 O 支 O 持 O 。 O

在 O 2 O 0 O 1 O 5 O 年 O 整 O 顿 O 过 O 后 O , O 大 O 量 O 伞 O 形 O 信 O 托 O 遭 O 遇 O 清 O 理 O , O 但 O 关 O 于 O 合 O 同 O 效 O 力 O 的 O 问 O 题 O , O 不 O 同 O 法 O 院 O 或 O 许 O 有 O 不 O 同 O 的 O 见 O 解 O 。 O 有 O 法 O 院 O 认 O 为 O , O 虽 O 然 O 伞 O 形 O 信 O 托 O 具 O 有 O 融 O 资 O 公 O 司 O , O 但 O 不 O 能 O 就 O 此 O 认 O 定 O 属 O 于 O 非 O 法 O 融 O 资 O 融 O 券 O ; O 而 O 对 O 于 O 其 O 给 O 证 O 券 O 市 O 场 O 带 O 来 O 系 O 统 O 性 O 风 O 险 O 的 O 可 O 能 O , O 亦 O 不 O 能 O 得 O 出 O 单 O 个 O 合 O 同 O 损 O 害 O 公 O 共 O 利 O 益 O 的 O 结 O 论 O 。 O

作 O 为 O 2 O 0 O 1 O 5 O 年 O 股 O 灾 O 的 O 导 O 火 O 索 O 之 O 一 O , O 伞 O 形 O 信 O 托 O 曾 O 造 O 就 O 大 O 量 O 一 O 夜 O 暴 O 富 O 或 O 血 O 本 O 无 O 归 O 的 O 市 O 场 O 谈 O 资 O 。 O 而 O 在 O 监 O 管 O 进 O 行 O 清 O 理 O 整 O 顿 O 后 O , O 投 O 资 O 者 O 账 O 户 O 内 O 出 O 现 O 的 O 损 O 失 O 该 O 如 O 何 O 处 O 理 O ? O

就 O 此 O 次 O 投 O 资 O 者 O 索 O 某 O 向 O 中 B-COM 融 I-COM 信 I-COM 托 I-COM 、 O 华 B-COM 融 I-COM 证 I-COM 券 I-COM 提 O 起 O 的 O 诉 O 讼 O 情 O 况 O 来 O 看 O , O 其 O 在 O 2 O 0 O 1 O 5 O 年 O 4 O 月 O

在 O 2 O 0 O 1 O 5 O 年 O 4 O 月 O , O 中 O 证 O 协 O 即 O 已 O 召 O 开 O 证 O 券 O 公 O 司 O 融 O 资 O 融 O 券 O 业 O 务 O 情 O 况 O 通 O 报 O 会 O , O 会 O 上 O 证 O 监 O 会 O 前 O 主 O 席 O 助 O 理 O 张 B-PER 育 I-PER 军 I-PER 对 O 证 O 券 O 公 O 司 O 开 O 展 O 融 O 资 O 融 O 券 O 业 O 务 O 提 O 出 O 了 O 七 O 项 O 要 O 求 O , O 其 O 中 O 明 O 确 O 要 O 求 O 证 O 券 O 公 O 司 O 不 O 得 O 为 O 场 O 外 O 配 O 资 O 、 O 伞 O 形 O 信 O 托 O 提 O 供 O 数 O 据 O 端 O 口 O 等 O 服 O 务 O 或 O 便 O 利 O 。 O

而 O 至 O 2 O 0 O 1 O 5 O 年 O 7 O 月 O , O 证 O 监 O 会 O 官 O 网 O 挂 O 出 O 《 O 关 O 于 O 清 O 理 O 整 O 顿 O 违 O 法 O 从 O 事 O 证 O 券 O 业 O 务 O 活 O 动 O 的 O 意 O 见 O 》 O , O 载 O 明 O 证 O 券 O 公 O 司 O 应 O 当 O 严 O 格 O 审 O 查 O 交 O 易 O 账 O 户 O 及 O 交 O 易 O 操 O 作 O 的 O 合 O 规 O 性 O , O 严 O 禁 O 账 O 户 O 持 O 有 O 人 O 通 O 过 O 证 O 券 O 账 O 户 O 下 O 设 O 子 O 账 O 户 O 等 O 方 O 式 O 违 O 规 O 进 O 行 O 证 O 券 O 交 O 易 O 。 O

2 O 0 O 1 O 5 O 年 O 8 O 月 O 底 O , O 证 O 监 O 会 O 内 O 部 O 下 O 发 O 通 O 知 O , O 明 O 确 O 清 O 理 O 整 O 顿 O 工 O 作 O 的 O 重 O 点 O 是 O 违 O 规 O 接 O 入 O 的 O 以 O 恒 O 生 O H O O O M O S O 系 O 统 O 为 O 代 O 表 O 的 O 具 O 有 O 分 O 仓 O 交 O 易 O 功 O 能 O 的 O 信 O 息 O 技 O 术 O 系 O 统 O , O 且 O 清 O 理 O 整 O 顿 O 工 O 作 O 原 O 则 O 上 O 应 O 于 O 9 O 月 O 3 O 0 O 日 O 前 O 完 O 成 O 。 O

在 O 监 O 管 O 要 O 求 O 不 O 断 O 落 O 地 O 之 O 下 O , O 中 B-COM 融 I-COM 信 I-COM 托 I-COM 在 O 2 O 0 O 1 O 5 O 年 O 9 O 月 O 以 O 邮 O 件 O 的 O 形 O 式 O 告 O 知 O 索 O 某 O 相 O 关 O 监 O 管 O 通 O 知 O 及 O 券 O 商 O 要 O 求 O 终 O 止 O 数 O 据 O 端 O 口 O 对 O 接 O 服 O 务 O 等 O , O 并 O 随 O 后 O 向 O 其 O 发 O 送 O 《 O 提 O 前 O 终 O 止 O 申 O 请 O 模 O 板 O 》 O 及 O 计 O 提 O 信 O 托 O 报 O 酬 O 。 O

在 O 索 O 某 O 签 O 字 O 确 O 认 O 提 O 前 O 终 O 止 O 后 O , O 相 O 关 O 信 O 托 O 计 O 划 O 于 O 2 O 0 O 1 O 5 O 年 O 9 O 月 O 终 O 止 O , O 两 O 期 O 合 O 计 O 8 O 0 O 0 O 万 O 元 O 的 O 信 O 托 O 资 O 金 O , O 最 O 终 O 仅 O 清 O 退 O 回 O 4 O 0 O 2 O . O 4 O 6 O 万 O 元 O , O 缩 O 水 O 近 O 半 O 。 O 对 O 此 O , O 索 O 某 O 认 O 为 O 中 B-COM 融 I-COM 信 I-COM 托 I-COM 向 O 其 O 提 O 供 O 中 B-COM 融 I-COM 恒 I-COM 生 I-COM 交 O 易 O 系 O 统 O 规 O 避 O 有 O 效 O 监 O 管 O 、 O 出 O 借 O 信 O 托 O 专 O 用 O 证 O 券 O 账 O 户 O 的 O 违 O 法 O 行 O 为 O 存 O 在 O 明 O 显 O 过 O 错 O , O 应 O 该 O 对 O 其 O 损 O 失 O 进 O 行 O 赔 O 偿 O 。 O

在 O 一 O 审 O 诉 O 讼 O 中 O , O 索 O 某 O 将 O 华 B-COM 融 I-COM 证 I-COM 券 I-COM 与 O 中 B-COM 融 I-COM 信 I-COM 托 I-COM 一 O 同 O 列 O 为 O 被 O 告 O , O 要 O 求 O 其 O 承 O 担 O 连 O 带 O 赔 O 偿 O 责 O 任 O , O 并 O 在 O 二 O 审 O 中 O 继 O 续 O 将 O 其 O 作 O 为 O 被 O 上 O 诉 O 方 O 。 O 作 O 为 O 开 O 户 O 券 O 商 O , O 在 O 该 O 案 O 中 O 真 O 有 O 这 O 么 O 大 O 的 O 责 O 任 O 吗 O ? O

macanv commented 4 years ago

@a461925358 如果有时候正常，调模型去吧，不是代码的问题。

parkLGW commented 2 years ago

您好，请问你的max_len_size是多大呢，数据分句后有截断吗