在使用paddle进行文档内容提取微调训练时，出现报错。 报错内容： “Unable to create tensor, you should probably activate truncation and/or padding ” ValueError: Unable to create tensor, you should probably activate truncation and/o […]
学习以及项目中的一些代码片段整理
机器学习训练指标：Precision、Recall、F1 score
在机器学习中的最常用的指标 Precision、Recall、F1 score。 Precision：精度，精确度 Recall： 召回率，查全率 F1 score：由 Precision 和 Recall 加权后的指标 概念理解 为了解释这几个指标，引入以下概念： 实际情况 预测结果 Positive Negative Positive True Positive (TP) False Posi […]
docker-compose避免多次build同一个镜像
在docker-compose.yml指定了多个服务。他们的是使用相同的 Dockerfile 生成镜像。它们使用相同的镜像，但每个服务都有不同的command或者端口等其他信息。 在开发或自测过程中，经常使用 docker-compose up –build 来重建镜像。docker 会根据Dockerfile 两次相同的 myimage，比较浪费时间。 原来的配置是这样的： ver […]
docker-compose同一镜像多个服务共用端口或不同端口
使用docker-compose部署某个服务，使用同一个镜像，这里有两种方式来部署： 共用端口 services: test-service: image: myimage ports: – “5000:5000” deploy: replicas: 3 这样配置三个服务共用一个端口，相当于多节点负载均衡的运行三个服务。 不同端口 services: test-service: image: my […]
rz上传下载文件乱码问题
在xshell向服务器使用rz命令上传大文件包时，有时候会出现满屏幕的乱码，还停不下来，非常的不友好。 这个原因是文件内容包含了控制字符 使用命令 rz -be # 参数解释 -b：–binary 用binary的方式上传下载，不解释字符为ascii； -e：–escape 强制escape 所有控制字符，比如Ctrl+x，DEL等。 来上传文件可以解决这个问题。 附rz -h输出： rz ver […]
在docker和docker-compose中使用GPU
GPU是宿主机的资源，要在docker中使用GPU以前可能很复杂，现在NVIDIA和docker最新的解决方案变得很方便。 环境要求 docker -v nvcc -V docker版本至少要求应该是20以上吧？ 安装密钥 distribution=(. /etc/os-release;echoIDVERSION_ID) \ && curl -s -L https://nvidia […]