调用 Azure 函数调用失败并显示“函数主机未运行”答案

【问题标题】：Calling Azure Function calls fail with "Function host is not running"调用 Azure 函数调用失败并显示“函数主机未运行”
【发布时间】：2020-02-06 15:16:31
【问题描述】：

我有一个我已经玩了几个月的函数（甚至出现了一些问题，如 here 所示），当我开始扩大使用范围时，我开始遇到问题从测试到“生产”。

该函数接受 2 个值，在 Azure 表中查找匹配值，如果找到则将其删除，然后将新值添加到一起。这在测试中效果很好。一旦我扩大规模，从每秒几个调用到每秒 20-30 个调用，它就会因上述响应而失败。

当我深入使用 Insights 时，实际问题是引发了 System.InvalidOperationException 异常。这是调用堆栈：

System.InvalidOperationException:
   at Microsoft.Azure.WebJobs.Script.WebHost.SecretManager+<PersistSecretsAsync>d__27`1.MoveNext (Microsoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=nullMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: C:\projects\azure-webjobs-sdk-script\src\WebJobs.Script.WebHost\Security\SecretManager.csMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: 440)
   at System.Runtime.CompilerServices.TaskAwaiter.ThrowForNonSuccess (mscorlib, Version=4.0.0.0, Culture=neutral, PublicKeyToken=b77a5c561934e089)
   at System.Runtime.CompilerServices.TaskAwaiter.HandleNonSuccessAndDebuggerNotification (mscorlib, Version=4.0.0.0, Culture=neutral, PublicKeyToken=b77a5c561934e089)
   at System.Runtime.CompilerServices.TaskAwaiter.ValidateEnd (mscorlib, Version=4.0.0.0, Culture=neutral, PublicKeyToken=b77a5c561934e089)
   at Microsoft.Azure.WebJobs.Script.WebHost.SecretManager+<GetHostSecretsAsync>d__12.MoveNext (Microsoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=nullMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: C:\projects\azure-webjobs-sdk-script\src\WebJobs.Script.WebHost\Security\SecretManager.csMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: 104)
   at System.Runtime.CompilerServices.TaskAwaiter.ThrowForNonSuccess (mscorlib, Version=4.0.0.0, Culture=neutral, PublicKeyToken=b77a5c561934e089)
   at System.Runtime.CompilerServices.TaskAwaiter.HandleNonSuccessAndDebuggerNotification (mscorlib, Version=4.0.0.0, Culture=neutral, PublicKeyToken=b77a5c561934e089)
   at Microsoft.Azure.WebJobs.Script.WebHost.WebJobsSdkExtensionHookProvider+<GetOrCreateExtensionKey>d__6.MoveNext (Microsoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=nullMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: C:\projects\azure-webjobs-sdk-script\src\WebJobs.Script.WebHost\WebHooks\WebJobsSdkExtensionHookProvider.csMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: 71)
   at System.Runtime.CompilerServices.TaskAwaiter.ThrowForNonSuccess (mscorlib, Version=4.0.0.0, Culture=neutral, PublicKeyToken=b77a5c561934e089)
   at System.Runtime.CompilerServices.TaskAwaiter.HandleNonSuccessAndDebuggerNotification (mscorlib, Version=4.0.0.0, Culture=neutral, PublicKeyToken=b77a5c561934e089)
   at Microsoft.Azure.WebJobs.Script.WebHost.WebJobsSdkExtensionHookProvider.GetExtensionWebHookRoute (Microsoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=nullMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: C:\projects\azure-webjobs-sdk-script\src\WebJobs.Script.WebHost\WebHooks\WebJobsSdkExtensionHookProvider.csMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: 64)
   at Microsoft.Azure.WebJobs.Script.WebHost.WebJobsSdkExtensionHookProvider.GetUrl (Microsoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=nullMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: C:\projects\azure-webjobs-sdk-script\src\WebJobs.Script.WebHost\WebHooks\WebJobsSdkExtensionHookProvider.csMicrosoft.Azure.WebJobs.Script.WebHost, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: 49)
   at Microsoft.Azure.WebJobs.Host.Config.ExtensionConfigContext.GetWebhookHandler (Microsoft.Azure.WebJobs.Host, Version=2.3.0.0, Culture=neutral, PublicKeyToken=31bf3856ad364e35)
   at Microsoft.Azure.WebJobs.Extensions.EventGrid.EventGridExtensionConfig.Initialize (Microsoft.Azure.WebJobs.Extensions.EventGrid, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null)
   at Microsoft.Azure.WebJobs.Host.Executors.JobHostConfigurationExtensions.InvokeExtensionConfigProviders (Microsoft.Azure.WebJobs.Host, Version=2.3.0.0, Culture=neutral, PublicKeyToken=31bf3856ad364e35)
   at Microsoft.Azure.WebJobs.Host.Executors.JobHostConfigurationExtensions.CreateStaticServices (Microsoft.Azure.WebJobs.Host, Version=2.3.0.0, Culture=neutral, PublicKeyToken=31bf3856ad364e35)
   at Microsoft.Azure.WebJobs.JobHost.InitializeServices (Microsoft.Azure.WebJobs.Host, Version=2.3.0.0, Culture=neutral, PublicKeyToken=31bf3856ad364e35)
   at Microsoft.Azure.WebJobs.Script.Utility.CreateMetadataProvider (Microsoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=nullMicrosoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: C:\projects\azure-webjobs-sdk-script\src\WebJobs.Script\Utility.csMicrosoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: 362)
   at Microsoft.Azure.WebJobs.Script.ScriptHost.LoadBindingExtensions (Microsoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=nullMicrosoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: C:\projects\azure-webjobs-sdk-script\src\WebJobs.Script\Host\ScriptHost.csMicrosoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: 966)
   at Microsoft.Azure.WebJobs.Script.ScriptHost.Initialize (Microsoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=nullMicrosoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: C:\projects\azure-webjobs-sdk-script\src\WebJobs.Script\Host\ScriptHost.csMicrosoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: 299)
   at Microsoft.Azure.WebJobs.Script.ScriptHostManager.RunAndBlock (Microsoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=nullMicrosoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: C:\projects\azure-webjobs-sdk-script\src\WebJobs.Script\Host\ScriptHostManager.csMicrosoft.Azure.WebJobs.Script, Version=1.0.0.0, Culture=neutral, PublicKeyToken=null: 178)

带有它的消息是：

Repository has more than 10 non-decryptable secrets backups (host).

不幸的是，我不知道这意味着什么。对此的任何搜索都会导致只有几个线程谈论重新生成密钥，但同样，我真的不知道这意味着什么。一些线程提到将功能移回 V1，但我已经在 V1 上，所以没有选择。

这个函数是怎么回事，我该如何解决？

对于正在查看此内容的任何 Azure 员工，我的函数 ID 是：

2019-01-18T15:52:18.658 [Info] Function started (Id=fc6850e8-7554-46d8-81ec-4d1697c7b572)

【问题讨论】：

scale up the usage from tests to "production"，你的意思是交换插槽还是什么用途？您的功能应用是否也在消费计划中？
我有同样的问题，这是一个消费计划。

标签： azure azure-functions

【解决方案1】：

删除D:\home\data\Functions\secrets 解决了这个问题。

总的来说，我了解到无论您从 Azure Function 获得什么奇怪的行为，Kudu 始终是您进行调查的最佳工具。

【讨论】：

这个文件夹的用途是什么？删除有什么影响？
好问题。据我了解，这是 KUDU 跟踪应用设置更改的地方。
我尝试删除它（尽管我只有几个键，但有大量备份）。这似乎已经修复了它（显然令牌已更改）。
它恢复为像以前一样重新生成密钥...stackoverflow.com/questions/53597614/…
我的系统在 Azure 存储 Blob 存储中有名为“azure-webjobs-secrets”的机密。使用 Storage Explorer，我浪费了整个子文件夹来重新启动我的功能。

【解决方案2】：

除了上面提到的解决方案之外，还有一点补充。我遇到了同样的问题，即使从 KUDU 网站上的 D:\home\data\Functions\secrets 文件夹中删除了秘密文件，我仍然遇到同样的错误。

我可以通过从 azure-webjobs-secrets 文件夹中删除 host.*.snapshot.*.json 文件来解决此问题，该文件夹位于我在 azure 上的 blob 存储中。基本上有 10 个这样的快照文件。

【讨论】：

Microsoft 实际上建议在其针对单租户逻辑应用程序（在 AzFunction 运行时运行）的文档中执行此操作。 docs.microsoft.com/en-us/azure/logic-apps/…

【解决方案3】：

消息表明这与您的函数中的主机级密钥（秘密）有关。

因此，即使我对此没有明确的解决方法（因为我从未遇到过此问题），但我建议您检查 D:\home\data\Functions\secrets 文件夹中的 host.json 并查看那里是否有任何异常情况，例如有超过 10 个键 - 如错误消息所示。

【讨论】：

【解决方案4】：

如果您有自定义Startup，则可能会出现阻止主机启动的错误。

在门户中，进入功能页面（可以看到function.json 内容的页面），（可能）会出现错误消息。由此，您可以了解在哪里查找错误。在我的例子中，当我尝试从启动类连接到 Azure Key Vault 时引发了异常，但 List permission was not given 到了函数。

【讨论】：

大量日志挖掘后，我发现我的主机日志中有启动异常。显然在启动次数失败后，超过 10 个键的次要错误将取代根本原因。