尝试从MongoDB存储库中跳过和获取数据时，溢出排序阶段缓冲了数据的使用

Question

我有一个启用REST和ODATA的经典Web API控制器，它调用基于MongoDB的存储库模式实现。

我不断

溢出排序阶段缓冲的数据使用量33556193字节超过了内部限制33554432字节

当我尝试跳过前12010年以上的记录并获得前10名时

?$skip=12020&$top=10&$orderby=Serial

经过一些搜索后，我尝试在Serial上实现一个索引，例如

private void GetCollection() //is like DBSet of some entity
{
  _collection = _dbContext.Database
     .GetCollection<TEntity>(typeof(TEntity).Name);
  Type typeParameterType = typeof(TEntity);
  if (typeParameterType.Name == "StoreCommand")
    if (_collection.IndexExists("Serial") == false)
      _collection.CreateIndex(IndexKeys<StoreCommand>.Ascending(_ => _.Serial));
}

我的存储库实现是这样的。

    public class MongoDbRepository<TEntity> :
    IRepository<TEntity> where
        TEntity : EntityBase
{
    private MongoCollection<TEntity> _collection;

    private SNDbContext _dbContext;
    public MongoDbRepository(SNDbContext dbContext)
    {
        _dbContext = dbContext;
        GetCollection();
    }
    private void GetCollection()
    {
        _collection = _dbContext.Database
            .GetCollection<TEntity>(typeof(TEntity).Name);
    }
    public IQueryable<TEntity> GetAll()
    {
        return _collection.AsQueryable(); 
    }//............And other functions after this

}

来自服务层的呼叫是这样的

 IQueryable<StoreCommand> GetAllStoreCommands() 
  {
     return _uow.StoreCommands.GetAll(); 
   } 

其中SNDbContext具有与使用MongoClient和连接字符串获取数据库有关的所有代码。

Answer 1

问题在于，在存储库实现中（未显示），您将从MongoDB中获取所有数据，然后将所有这些数据存储在缓冲区中并在内存中进行排序以允许跳过和获取。

您要做的是通过以下两种方式之一来修改存储库：

• 返回一个纯可查询的内容，以便您可以组成其余的查询，并仍然使其在MongoDB引擎上执行
• 直接公开一个方法，该方法接收要跳过和采用的参数，并进行查询以直接在数据库中执行这些参数。

您可以使用游标实现它，如下所示：

var collection = db.GetCollection<YourType>("yourtype");
var sort = SortBy<YourType>
            .Ascending(p => p.YourProperty1)
            .Descending(p => p.YourProperty2);
MongoCursor<YourType> cursor = collection
  .FindAll()
  .SetSortOrder(sort)
  .SetSkip(12010)
  .SetLimit(10);

如果您迭代此游标，则根本不会出现任何问题。

您还可以定义和执行SelectQuery ，并指定Skip和Take值。 请参阅文档： SelectQuery属性