在一些高负载的情况下，Ubuntu系统容易遇到OOM Killer导致进程被杀死的问题。OOM Killer是一个内核机制，用于在系统内存不足时选择性地终止进程以释放内存。

在本文中，我们将讨论如何解决线上Ubuntu系统遇到OOM Killer导致进程被杀死的问题。

1. 监控系统资源使用情况

首先，我们需要监控系统资源的使用情况，以便及时发现系统内存不足的情况。可以使用top、htop等命令来查看系统资源的使用情况，也可以使用Zabbix、Nagios等监控软件来实现自动化监控。

2. 修改系统内存参数

如果我们发现系统内存不足的情况，我们可以考虑修改系统内存参数来解决问题。可以通过修改sysctl.conf文件来实现。

打开文件：

```
sudo vi /etc/sysctl.conf
```

添加以下参数：

```
vm.swappiness = 10
vm.min_free_kbytes = 65536
vm.vfs_cache_pressure = 50
```

其中，vm.swappiness参数定义了内核在交换数据时的倾向性。该参数的值越高，内核在交换数据时的倾向性越强。而在一个内存资源充足的环境中，内核不需要使用交换空间来释放内存，因此将vm.swappiness的值降低可以减少使用交换空间的情况。

vm.min_free_kbytes参数指定内核在内存不足时，需要保留的最小内存量（单位为kb）。将vm.min_free_kbytes的值设置为较高的数值可以避免OOM Killer杀死进程。

vm.vfs_cache_pressure参数定义了内核在释放缓存时候的倾向性。该参数的值越高，内核释放缓存的倾向性越强。

3. 增加系统内存

如果我们无法通过修改系统内存参数来解决问题，可以考虑增加系统内存。这样可以提高系统的稳定性和可靠性，减少OOM Killer的发生。

可以通过增加物理内存或者虚拟内存的方式来增加系统内存。

4. 优化进程资源使用

最后，我们还可以优化进程资源的使用，以减少内存的占用。可以通过以下方法来实现：

- 优化代码，减少内存占用
- 减少进程的子进程数量
- 减少进程使用的缓存
- 停止不必要的进程

总结

在本文中，我们讨论了如何解决线上Ubuntu系统遇到OOM Killer导致进程被杀死的问题。我们可以通过监控系统资源使用情况、修改系统内存参数、增加系统内存以及优化进程资源使用等方法来解决问题。通过以上方法可以提高系统的稳定性和可靠性，减少OOM Killer的发生。