【问题标题】:All MVC pages fail with the message an item with the same key has already been added所有 MVC 页面都失败,并显示已添加具有相同键的项目的消息
【发布时间】:2013-03-18 05:09:02
【问题描述】:

最终,我试图解决Loading any MVC page fails with the error “An item with the same key has already been added.”An item with the same key has already been added 中提到的相同问题。第一个链接的副本是All MVC pages fail with the message an item with the same key has already been added,但它有一些额外的相关信息,确认它只影响 MVC 页面,而处理 appSettings 的 web 表单和应用程序的其他方面继续正常工作。

我现在已经在生产环境中看到过四次,并且在任何其他环境(开发、测试、UAT)中都没有看到过。我仔细检查和调试了 System.Web.WebPages 的源代码和 MVC 堆栈的相关部分,但没有遇到任何突出的问题。这个问题在从 MVC3 迁移到 MVC4 时仍然存在,并且来自 aspnetwebstack.codeplex.com 的最新变更集似乎没有解决这个问题。

问题的简要总结:

  • 每个 MVC 页面都受到影响并且完全无法使用
  • WebForms 和使用 appSettings 的应用程序的其他方面继续正常工作
  • 只有重新启动 appPool 才能解决此问题
  • 至少有一次,正如上面一篇文章中提到的那样,这是在 IIS 定期回收 appPool 之后发生的
  • 在低流量和高流量期间都会发生这种情况
  • 这发生在多台生产服务器上,但该问题在任何给定时间仅影响单个服务器,因为其他服务器继续提供 MVC 页面

有问题的代码行是var items = new Lazy<Dictionary<object, object>>(() => appSettings.AllKeys.ToDictionary(key => key, key => (object)appSettings[key], comparer));,但它发生在通过从items 请求值来强制延迟初始化时appSettings 变量来自System.Web.WebConfigurationManager.AppSettings,它是对System 的直接静态引用.Configuration.ConfigurationManager.AppSettings。所以我相信这条线相当于:var items = new Lazy<Dictionary<object, object>>(() => System.Configuration.ConfigurationManager.AppSettings.AllKeys.ToDictionary(key => key, key => (object)appSettings[key], comparer));

我很少怀疑框架问题,但 appSettings 似乎有两个相同的不同键(与支持同一键的多个值的 NameValueCollection 不同)。在 MVC 堆栈中使用的 comparer 是 StringComparer.OrdinalIgnoreCase,它似乎与配置系统使用的匹配。如果这是一个框架问题,当 MVC 堆栈使用 ToDictionary() 扩展方法强制 NameValueColleciton 进入字典时,它似乎非常无情。我相信使用appSettings.AllKeys.Distinct().ToDictionary(...) 可能会允许MVC 堆栈像应用程序的其余部分一样正常运行,并且忽略重复键的可能性。这种无情的天性似乎也促成了NullReferenceException in WebConfigScopeDictionary 中描述的问题

Server stack trace: 
   at System.Collections.Generic.Dictionary`2.Insert(TKey key, TValue value, Boolean add)
   at System.Linq.Enumerable.ToDictionary[TSource,TKey,TElement](IEnumerable`1 source, Func`2 keySelector, Func`2 elementSelector, IEqualityComparer`1 comparer)
   at System.Web.WebPages.Scope.WebConfigScopeDictionary.<>c__DisplayClass4.<.ctor>b__0()
   at System.Lazy`1.CreateValue()
Exception rethrown at [0]: 
   at System.Lazy`1.get_Value()
   at System.Web.WebPages.Scope.WebConfigScopeDictionary.TryGetValue(Object key, Object& value)
   at System.Web.Mvc.ViewContext.ScopeGet[TValue](IDictionary`2 scope, String name, TValue defaultValue)
   at System.Web.Mvc.ViewContext.ScopeCache..ctor(IDictionary`2 scope)
   at System.Web.Mvc.ViewContext.ScopeCache.Get(IDictionary`2 scope, HttpContextBase httpContext)
   at System.Web.Mvc.ViewContext.GetClientValidationEnabled(IDictionary`2 scope, HttpContextBase httpContext)
   at System.Web.Mvc.Html.FormExtensions.FormHelper(HtmlHelper htmlHelper, String formAction, FormMethod method, IDictionary`2 htmlAttributes)
   at ASP._Page_Areas_Client_Views_Equipment_Index_cshtml.Execute()
   at System.Web.WebPages.WebPageBase.ExecutePageHierarchy()
   at System.Web.Mvc.WebViewPage.ExecutePageHierarchy()
   at System.Web.WebPages.WebPageBase.ExecutePageHierarchy(WebPageContext pageContext, TextWriter writer, WebPageRenderingBase startPage)
   at System.Web.Mvc.ViewResultBase.ExecuteResult(ControllerContext context)
   at System.Web.Mvc.ControllerActionInvoker.<>c__DisplayClass1a.<InvokeActionResultWithFilters>b__17()
   at System.Web.Mvc.ControllerActionInvoker.InvokeActionResultFilter(IResultFilter filter, ResultExecutingContext preContext, Func`1 continuation)
   at System.Web.Mvc.ControllerActionInvoker.InvokeActionResultWithFilters(ControllerContext controllerContext, IList`1 filters, ActionResult actionResult)
   at System.Web.Mvc.Async.AsyncControllerActionInvoker.<>c__DisplayClass25.<BeginInvokeAction>b__22(IAsyncResult asyncResult)
   at System.Web.Mvc.Controller.<>c__DisplayClass1d.<BeginExecuteCore>b__18(IAsyncResult asyncResult)
   at System.Web.Mvc.Async.AsyncResultWrapper.<>c__DisplayClass4.<MakeVoidDelegate>b__3(IAsyncResult ar)
   at System.Web.Mvc.Controller.EndExecuteCore(IAsyncResult asyncResult)
   at System.Web.Mvc.Async.AsyncResultWrapper.<>c__DisplayClass4.<MakeVoidDelegate>b__3(IAsyncResult ar)
   at System.Web.Mvc.MvcHandler.<>c__DisplayClass8.<BeginProcessRequest>b__3(IAsyncResult asyncResult)
   at System.Web.Mvc.Async.AsyncResultWrapper.<>c__DisplayClass4.<MakeVoidDelegate>b__3(IAsyncResult ar)
   at System.Web.HttpApplication.CallHandlerExecutionStep.System.Web.HttpApplication.IExecutionStep.Execute()
   at System.Web.HttpApplication.ExecuteStep(IExecutionStep step, Boolean& completedSynchronously)

为了将我的问题与已经提出的问题区分开来,我会问是否有人看到配置系统因多个重复键而损坏,或者 NameValueCollection.AllKeys 返回两个相同的键?我知道您可以在配置文件中定义多个键,但最后一个键获胜,并且该场景不会重现此问题。

虽然不止我一个人多次看到这种行为,但描述这个问题的帖子相对较少,所以我也怀疑这可能是配置/环境问题,但同样,服务器运行几个月都不会遇到这个问题,并且 appPool 重新启动会立即纠正该问题。

如果服务器开始看到此错误,我已通过强制重新启动 appPool 来缓解此问题,但管理层对这种“hacky”解决方案不满意,因为某些用户仍会遇到错误。

帮助?!?!?

编辑:

这是一个人为的、俗气的测试,可以重现该场景,但无助于解决问题。它发生在大约。 20% 的测试运行。代码会因其他线程原因而崩溃,但令人感兴趣的是“已添加相同的键”错误。

[TestClass]
public class UnitTest1
{
    readonly NameValueCollection _nameValueCollection = new NameValueCollection();
    private Lazy<Dictionary<object, object>> _items;

    [TestMethod]
    public void ReproduceSameKeyHasAlreadyBeenAdded()
    {
        Thread[] threads = new Thread[1000];
        for (int i = 0; i < 1000; i++)
        {
            ThreadStart threadStart = AddEntry;
            Thread thread = new Thread(threadStart);
            threads[i] = thread;
        }
        foreach (var thread in threads)
            thread.Start();
        Thread.Sleep(100);
        _items = new Lazy<Dictionary<object, object>>(() => _nameValueCollection.AllKeys.ToDictionary(key => key, key => (object)_nameValueCollection[key], ScopeStorageComparer.Instance));

        object value;
        _items.Value.TryGetValue("4", out value); // approx. 20% of time, blows up here with mentioned error
        Assert.IsTrue(value != null);
    }

    private int _counter;
    private void AddEntry()
    {
        _counter++;
        try
        { // add a bunch of even keys, every other one a duplicate
            _nameValueCollection.Add((_counter%2) == 0 ? _counter.ToString() : (_counter + 1).ToString(), "some value");
        }
        catch {}
    }
}


StackTrace:
       at System.ThrowHelper.ThrowArgumentException(ExceptionResource resource)
       at System.Collections.Generic.Dictionary`2.Insert(TKey key, TValue value, Boolean add)
       at System.Linq.Enumerable.ToDictionary[TSource,TKey,TElement](IEnumerable`1 source, Func`2 keySelector, Func`2 elementSelector, IEqualityComparer`1 comparer)
       at UnitTestProject1.ReproduceSameKeyHasAlreadyBeenAdded.<TestMethod1>b__0() in c:\Git\AspNetWebStack\aspnetwebstack\UnitTestProject1\UnitTest1.cs:line 37
       at System.Lazy`1.CreateValue()

【问题讨论】:

  • 这是一个疯狂的猜测,但是如果在运行时通过某些代码路径更改设置,我想知道它是否不是线程安全的,并且可能会导致一些竞争条件,其中相同的键存在两次。不过,我认为您不会在运行时修改代码设置。
  • @AaronLS - 我已经彻底检查了代码库中可能会修改 appSettings 的任何内容,但没有发现任何内容。我已经寻找尝试使用 ConfigurationManager 更新设置、通过反射添加设置或直接写入 web.config 文件的实例。感谢您的猜测,我愿意接受任何想法...
  • 当你使用distinct时,它解决问题了吗?
  • @RodJohnson - 我无法重现该问题。我们的生产环境中有 4 台服务器,我们已经看到这种情况在 8 个月内发生了 4 次。它总是在任何时候只影响单个服务器,因此相当罕见。我们在任何其他环境(开发/测试/UAT)中都没有看到这一点,而且我试图通过集成/单元测试来重现这一点也没有任何成功。我采用了“hacky”解决方案来缓解问题,我们没有运行修改后的 MVC 程序集。
  • 你为比较器传递了什么?

标签: asp.net asp.net-mvc-3 asp.net-mvc-4


【解决方案1】:

我们遇到了同样的问题,并最终将其归结为 ConfigurationManager.AppSettings 集合的动态更新。我在这里发布了完整的答案:https://stackoverflow.com/a/17415830/2423407

【讨论】:

  • 谢谢史蒂夫。虽然我还没有完全调查这是否绝对是我们的问题,但是我们使用的是旧版本的 Telerik 控件并且没有其他合理的答案。再次感谢。
【解决方案2】:

您是否绝对肯定错误发生在您正在初始化项目的行上,而不是正在使用项目添加到其他字典的行上(我想是静态的)。

对我来说,最有可能发生这种情况的方式是代码并行执行(由两个并发用户),而第二个执行导致异常。

作为一般的解决方法,我通常将一个具有所有配置参数的强类型类初始化为 auto-start provider(并添加一些值的强类型检查,例如检查 int 是否为 int 等)以避免运行时错误。

这具有在预热时加载它们的双重好处,而不是在用户需要信息(更好的响应性能)时加载,并且据说它们也可以保证线程安全。

看看这是否不能解决您的问题。如果您不想这样做,我至少会尝试执行因多种威胁而对您失败的代码,因为我的猜测是您会看到您的错误相当可靠地发生。

【讨论】:

  • 绝对正面?不,但非常接近。该问题似乎发生在 System.Configuration 程序集中,该程序集将 NameValueCollection 用于 appSettings。因为它发生在配置系统的深处,我不确定如何应用您的解决方法。我已经查看了 System.Configuration 代码,它似乎可以处理并发,但我并没有消除所有可能性。因为 NameValueCollection 不是线程安全的,所以我可以通过人为的测试来重现这一点,并且堆栈跟踪模仿了我们在上面看到的内容。我将在另一篇文章中发布代码和堆栈跟踪。
猜你喜欢
  • 1970-01-01
  • 2019-10-15
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2017-04-15
  • 2013-04-04
相关资源
最近更新 更多