menu

GloVe

date_range 28/06/2021 23:00

#GloVe GloVe是“全局向量(global vector)”的缩写,是斯坦福开发的一种词嵌入技术。这是一个无监督的学习算法,建立在Word2Vec的基础上。虽然Word2Vec在生成词嵌入方面相当成功,但它的问题是它有一个小窗口,通过这个窗口它可以聚焦于本地单词和局部上下文来预测单词。这意味着它无法从全局,即整个语料库中出现的词的频率中学习。GloVe,顾名思义,可以查看语料库中的所有单词。

pydicom读写医学影像文件

date_range 28/06/2021 22:32

pydicom_是一个 Python 包,用于处理DICOM文件,例如医学图像、报告和放射治疗对象。 pydicom_可以轻松地将这些复杂的文件读取为 Python 结构,以便于操作。修改后的数据集可以再次写入 DICOM 格式文件。 一个简单示例 ```

文档中段落级别的文本标注任务

date_range 28/06/2021 22:27

文档对段落级别的文本标注任务如果直接上crf显然是不可想像的。 想法: 句子分类借助bert的cls对句子分类。 cls输出向量拼接经过crf。

可以保持序列的连贯,而且训练的压力相对小很多。

如果没有可用的数据集,完全可以用摘要算法生成些样本作为测试。
在经过人工筛选,没准可以提取不错的摘要。

基于Bert的关系抽取SelfORE

date_range 28/06/2021 22:21

基于Bert的关系抽取SelfORE https://www.aclweb.org/anthology/2020.emnlp-main.299.pdf 基本没错了就是分类,bert处理语言,任何任务都可以转化成为语言来做。

YOLO单阶段方法的开山之作

date_range 28/06/2021 22:19

2021-06-28 记事

使用nvcc查看cuda版本

date_range 28/06/2021 09:01

nvcc --version

pytorch冻结模型部分层

date_range 26/06/2021 15:07

```python #冻结模型部分层 for name ,param in model.named_parameters(): param.requires_grad = False for ele in unfreeze_layers: if ele in name: param.requires_grad = True break

json保存配置文件

date_range 24/06/2021 14:21

json保存配置文件

linux 环境变量

date_range 24/06/2021 13:58

linux 环境变量

Docker 启动elasticsearch限制使用内存

date_range 24/06/2021 10:35

Reducing Memory#

只需要修改esJsOptions=-Xmx1g -Xms1g里的1g为你的内存限制即可。

编辑