Lambda 遇到 UnobservedTaskException - 无法访问已处理的对象

Question

我一直在 AWS Lambda 的 CloudWatch 日志中注意到此异常。

一切似乎都得到了处理，所以我认为这是在 Lambda 完成执行后创建的 AWS 代码（与我编写的内容相反）中的一个例外。

由于它在功能上有效，我一直忽略它，但我担心可能存在我没有注意到的问题。

---

Lambda 通过“TaskScheduler.UnobservedTaskException”事件遇到 UnobservedTaskException：

{
    "errorType": "AggregateException",
    "errorMessage": "A Task's exception(s) were not observed either by Waiting on the Task or accessing its Exception property. As a result, the unobserved exception was rethrown by the finalizer thread. (Cannot access a disposed object.\nObject name: 'System.Net.Sockets.UdpClient'.)",
    "cause": {
        "errorType": "ObjectDisposedException",
        "errorMessage": "Cannot access a disposed object.\nObject name: 'System.Net.Sockets.UdpClient'.",
        "stackTrace": [
            "at System.Net.Sockets.UdpClient.EndReceive(IAsyncResult asyncResult, IPEndPoint& remoteEP)",
            "at System.Net.Sockets.UdpClient.<>c.<ReceiveAsync>b__56_1(IAsyncResult asyncResult)",
            "at System.Threading.Tasks.TaskFactory`1.FromAsyncCoreLogic(IAsyncResult iar, Func`2 endFunction, Action`1 endAction, Task`1 promise, Boolean requiresSynchronization)"
        ]
    },
    "causes": [ {
        "errorType": "ObjectDisposedException",
        "errorMessage": "Cannot access a disposed object.\nObject name: 'System.Net.Sockets.UdpClient'.",
        "stackTrace": [
            "at System.Net.Sockets.UdpClient.EndReceive(IAsyncResult asyncResult, IPEndPoint& remoteEP)",
            "at System.Net.Sockets.UdpClient.<>c.<ReceiveAsync>b__56_1(IAsyncResult asyncResult)",
            "at System.Threading.Tasks.TaskFactory`1.FromAsyncCoreLogic(IAsyncResult iar, Func`2 endFunction, Action`1 endAction, Task`1 promise, Boolean requiresSynchronization)"
        ]
    }]
}

lambda 代码非常简单：它使用Dapper将这些SNS messages添加到 SQL 数据库中。

我认为我在 Fucntion 处理程序中执行async可能存在一些问题。 有任何想法吗？

public class Function
{
    private static string _connectionString;

    public async Task<IEnumerable<InsertSnsResult>> FunctionHandler(SNSEvent @event, ILambdaContext context)
    {
        try
        {
            context.Logger.LogLine("Adding SNS Messages");
            _connectionString = _connectionString ?? await DecryptHelper.DecryptEnvironmentVariableAsync("ConnectionString").ConfigureAwait(false);
            var handler = new AddSnsMessageHandler(new SnsMessagesRepository(_connectionString, context.Logger));
            return await handler.AddSnsEvents(@event).ConfigureAwait(false);
        }
        catch (Exception e)
        {
            context.Logger.LogLine(e.Message);
            throw;
        }
        finally
        {
            context.Logger.LogLine("Finished SNS Adding Messages");
        }
    }
}

[编辑]

在这里要清楚，这个异常不会在 try/catch 块中被捕获。 如果确实如此，它就不会是UnobservedTaskException 。 这就是为什么我很难找到问题的根源。

这是存储库代码

public async Task<List<InsertSnsResult>> InsertSnsMessages(IEnumerable<SnsEvent> records)
{
    using (var connection = new SqlConnection(_connectionString))
    {
        await connection.OpenAsync().ConfigureAwait(false);

        var results = new List<InsertSnsResult>();
        foreach (var record in records)
        {
            try
            {
                await connection.ExecuteAsync(InsertEventCommand, record).ConfigureAwait(false);
                results.Add(new InsertSnsResult(record.CorrelationId, true));
            }
            catch (Exception ex)
            {
                _logger.LogLine($"InsertSns failed for {record.Id}. {ex.Message}");
                results.Add(new InsertSnsResult(record.CorrelationId, false));
            }
        }

        return results;
    }            
}

Answer 1

日志消息很简单，并解释了正在发生的事情：

• 你有一个异步任务
• 该异步任务正在访问一个已被释放的对象，可能是因为您的工作流中存在一些竞争条件，即异步工作流中的对象与需要它的工作流的另一部分无序处理。 这意味着此工作流程中存在严重问题。
• 异步任务永远不会等待，无论是与 await 异步，还是（不要这样做！）与 Result 或 Wait 同步。 这意味着永远不会采用异常延续路径，并且任务会在收集时注意到这一点。 同样，如果您有一项从不等待结果的任务，那么您的工作流程中可能会出现严重问题。 将此事实与上一点的事实相结合：我们现在有两个相互补充的证据，即此工作流程中存在严重破坏的问题，并且它涉及一项任务，而该任务在应该等待时未等待以确保排序约束.
• 因此，您的终结器线程会出现异常，这真的很糟糕。

由于它在功能上有效，我一直忽略它

我曾经听说，当工厂着火并烧毁地面时，平均有七种不同的安全系统被人们忽视或禁用。 摆脱这种认为它有效的习惯，所以它必须是安全的。 也许这没什么，但我会认为这些消息表明存在严重问题，除非我有其他证据。

Answer 2

我也遇到过一个地方，我有一个 3rd 方库导致错误。 我想在 CloudWatch 之外记录它。 为了防止 Lambda 记录这些，我能够做一些邪恶的反射来重置事件处理程序。

这是自己执行此操作的代码。 请注意这是邪恶的代码。 它是脆弱的，并且会在 CLR 中更改代码或编译器进行优化（最近发生过）时损坏。 但是，这是我能找到的选择退出 Lambda 提供的此功能的唯一方法

private void ReplaceLambdaDefaultUnobservedTaskException()
{
    try
    {
        var bindingFlags = BindingFlags.NonPublic | BindingFlags.Static;
        Type type = typeof(TaskScheduler);

        var field = type.GetField("_unobservedTaskException", bindingFlags);

        if (field == null)
        {
            field = type.GetField("UnobservedTaskException", bindingFlags);
        }

        var handler = new EventHandler<UnobservedTaskExceptionEventArgs>(TaskSchedulerOnUnobservedTaskException);
        field.SetValue(null, handler);
    }
    catch (Exception ex)
    {
        logger.Warning(ex, "Unable to do evil reflection.");
    }

    TaskScheduler.UnobservedTaskException += TaskSchedulerOnUnobservedTaskException;
}

private void TaskSchedulerOnUnobservedTaskException(object sender, UnobservedTaskExceptionEventArgs e)
{
    e.SetObserved();
    logger.Error(e.Exception, "Lambda threw an UnobservedTaskException");
}