码农场

2023-06-02阅读(4610)评论(1)

手作り幻想 本文 川田順造   アフリカから久()しぶりに日本()に帰()って、「手仕事()」や「手作()り」ということに、異常()な関心()が払(われているのに驚()いた。それまでの2()年半()、私)が、基礎的()な生産技術(...

2023-01-06阅读(6567)评论(0)

NLP 工程师 工作内容 研发业内领先的语言理解与生成、知识图谱与推理、语义索引与搜索的技术体系。包括但不限于如下方向—— 核心NLU技术：分词、词性标注、命名实体识别、句法分析、语义分析； 可控NLG技术：文本摘要、文章生成、代码生成、机...

2022-11-22阅读(5701)评论(0)

第八課 案内者 假名上标的版本点这儿 (｡･∀･)ﾉﾞ：假名上标 本文         寺田寅彦   電車(でんしゃ)に跳(は)ね飛(と)ばされてけがをした どこかへ旅行りょこうがしてみたく...

2022-01-30阅读(9742)评论(0)

在进行一项NLP任务前，了解评测指标至关重要。以语法纠错为例，一项评测如何定义、如何对齐黄金与预测数据、是否符合人工评测、是否支持多语种等等都值得关注。本文简要评测几个常用的评测指标，特别关注对中文的支持程度。 首先，语法纠错任务经常定义为...

2021-12-23阅读(8301)评论(1)

曾经一直在PC上用EB软件，在mac上也用的是EBMac。EB格式的日语词典资源还算挺多的，就是版本比较旧。我一般挂载这些词典： 不过iOS上的EB就挺差，免费版还有广告。在iOS上，我更喜欢用欧路词典，免费版也没有广告。虽然词典跟EB不通...

2021-11-27阅读(7483)评论(0)

去年流行了一阵相对位置编码，各种巧夺天工的设计层出不穷，各有各的数学解释。然而谷歌这篇文章指出，相对位置并不优于绝对位置。之所以看上去更优是因为位置信息被加到了每一层注意力矩阵上，增大了矩阵的秩。其实我当时看这些论文的时候就很疑惑，这些论文...

2021-11-08阅读(9054)评论(2)

很久没有关注中文分词，今年恰好开会听了这篇清华领衔的长论文，分数相当不错。而且还引用了我的第一篇论文，于是简要介绍一下。虽然仰慕已久，但我与论文作者们并无私交。本文仅代表我的个人观点，如果有任何理解或表述错误，都是我的责任，与原作者无关。图...

2021-11-07阅读(7355)评论(0)

近来预训练语言模型在许多任务上成果斐然，然而在多任务联合学习上则差强人意。通过剪枝，我们发现所有任务会争夺一些通用的注意力头。据此，我们提出了干细胞假说：预训练会孕育一些天才注意力头，如同干细胞，可以分化为专精一种任务的功能细胞，却难以同时...

2021-11-04阅读(11962)评论(11)

今天我的MBP M1MAX终于寄到了，于是第一时间为HanLP提供M1的原生CPU+GPU支持。MBP用户从此享受到GPU加速的推理与训练，微调个BERT同样丝滑。本文简要介绍原生环境搭建与安装，适用于包括M1系列在内的Apple Sili...

2021-07-21阅读(24582)评论(3)

上周收到LDC的订阅邮件，由布兰迪斯大学和南京师范大学联合标注的中文抽象意义表示语料库2.0（CAMR 2.0）发布了。于是第一时间下单购买，做一期开箱评测。 抽象意义表示（Abstract Meaning Representation，A...