load segment failed, OOM if load, maxSegmentSize = 236.xxxMB

[gangren-user]

报错导致的milvus无法连接，无法删除集合或数据来释放内存，这种问题怎么解决
attu、milvus CLI工具，都无法连接，报错连接失败
如果需要删除镜像，删除数据集文件重新构建集合初始化数据才能解决问题的话，这样的代价太大了，会造成耗时久，无法及时恢复应用

我尝试删除了inset_log目录下的某一个集合的数据卷文件，结果导致无法启动，所以这里我并不知道怎么解决这样的问题能快速恢复

完整报错：load segment failed, OOM if load, maxSegmentSize = 236 MB, memUsage=3595 MB, predictMemUsage = 18866 MB, totalMem = 15197 MB thresholdFactor = 0.000000

docker单机部署
milvus2.5版本

[yhmo]

看起来是要加载一张表但内存容量不足
你查一下日志里有没有带有这个字样的 "start loading..."，最好是能把完整的日志贴上来
机器的内存容量一直都是16GB么？

[gangren-user]

[INFO] [segments/segment_loader.go:263] ["start loading..."] [traceID=xxxxxx] [collectionID=xxx] [segementType=Sealed] [requestSegments="[455799659xxx]"] [pregaredSegements="[455799659xxx]"] [segementNum=1] [afterFilter=1]

[INFO] [segments/segment_loader.go:263] ["start loading segement files"] [traceID=xxxxxx] [collectionID=xxx] [paetitionID=455799659xxx] [shard=by-dev-rootcoord-dml_2_4557996597xxx] [segementID=455799xxx] [rowNUm=1901] [segementType=Sealed]

[INFO] [segments/segment_loader.go:263] ["start loading field data for field"] [traceID=xxxxxx] [collectionID=xxx] [paetitionID=455799659xxx] [segementID] [segementID=455799xxx] [fieldID=101] [rowCount=1901]

[gangren-user]

好的，非常感谢

[yhmo]

"start loading..." 这里的segmentNum=1，说明只有1个segment

但是"load segment failed, OOM if load"这里， maxSegmentSize = 236 MB表明最大的segment size只有236MB, memUsage=3595 MB表明当前内存用量只有3.5GB, predictMemUsage = 18866 MB是预计的内存用量，一般是当前内存用量加上最大的segment size乘以2。
236 MB 的 maxSegmentSize 无论如何也不应该使得3.5GB增长到18GB，这里不合理。这个milvus里有几个表？各个表的数据量是多大的？

[gangren-user]

安装birdwatcher工具后尝试释放集合，在连接etcd时还是发生了报错
Offline > connect -- etcd 127.0.0.1:2739
failed to connect --etcd: context deadline exceeded

这里我尝试了localhost:7001也是不可以的，通过查看etcd容器，确实是正常启动状态

[yhmo]

你是用docker compose https://milvus.io/docs/install_standalone-docker-compose.md, 还是 docker https://milvus.io/docs/install_standalone-docker.md 部署的？

如果是docker compose的话，看一下docker-compose.yaml中的etcd 2379端口是否已暴露出来：

services:
  etcd:
    ......
    ports:
      - "2379:2379"