石头木

摘要： 项目地址：https://github.com/jiangnanboy/model2onnx 一.将roberta模型转为onnx，并对[MASK]进行推理预测。 二.将macbert模型转为onnx，并对中文进行拼写纠错。 一.roberta-onnx（对中文句子[MASK]预测） 将模型转为on 阅读全文

摘要： 这里利用java加载onnx模型，并进行推理。 项目地址：https://github.com/jiangnanboy/onnx-java 步骤 1.利用java加载onnx模型，并进行推理预测。这里采用roberta模型的onnx版。 2.pytorch模型从这里 下载。 3.pytorch模型转 阅读全文

摘要： albert-fc for LP(Link Prediction)，链接预测 项目地址：https://github.com/jiangnanboy/albert_link_prediction 概述 链接预测是一种根据KG中已存在的实体去预测缺失事实的任务，是一种有前途的、广泛研究的、旨在解决KG 阅读全文

摘要： jcorrector 项目地址：https://github.com/jiangnanboy/jcorrector 中文文本纠错工具。音似、形似错字（或变体字）纠正，可用于中文拼音、笔画输入法的错误纠正。项目为java开发，此项目参考了pycorrector，在此对作者表示感谢。 jcorrecto 阅读全文

摘要： 一.概述 我之前做的一个小demo怎么利用gpt2进行句子改写生成，是一种使用自监督的方式进行学习和生成，这种方式生成的句子对原句的改动比较大，另外还有改变原句意思的可能性，所以是不太适用较严谨的句子改写。最近正好看过一篇AAAI-20的文章《Integrating Linguistic Knowl 阅读全文

摘要： 参考我之前的一个项目给定title和keywords利用gpt2生成文本，从中可以看出只是利用了gpt2模型，没有其它模型上的改动或组合，变化的只是input部分，在input中，加入了title和keywords两部分。那么训练时候的model输入，就会有三部分：[BOS] + title + [ 阅读全文

摘要： albert-fc for RE(Relation Extraction)，中文关系抽取 项目地址：https://github.com/jiangnanboy/albert_re 概述 关系抽取是指从非结构化文本中抽取语义关系的一项基本任务。提取出来的关系通常发生在两个或多个特定类型的实体之间(例 阅读全文

摘要： albert-crf for SRL(Semantic Role Labeling)，中文语义角色标注 项目地址：https://github.com/jiangnanboy/albert_srl 概述 自然语言的语义理解往往包括分析构成一个事件的行为、施事、受事等主要元素，以及其他附属元素（adj 阅读全文

摘要： albert-crf 项目地址：https://github.com/jiangnanboy/albert_ner 概述 利用huggingface/transformers中的albert+crf进行中文实体识别 利用albert加载中文预训练模型，后接一个前馈分类网络，最后接一层crf。利用al 阅读全文

摘要： 一.在文本校对中，利用最大熵对量名搭配进行校对测试，本文参考了张仰森教授的论文《最大熵方法中特征选择算法的改进与纠错排歧》 1.量名纠错步骤： (1).挖掘量名搭配库 (2).根据量名搭配库，找出句子中可能出现的量名搭配错误 (3).将有量名搭配错误的句子输入最大熵纠错模型中，输出预测的最大概率对应 阅读全文