Menu
CoddyTech
Начать обучение

Пагинация в базе данных

Часть раздела Базы данных с MongoDB путешествия по Node.js на Coddy. Урок 27 из 29.

Полка с десятью тысячами книг не поместится в один ответ. Клиент запрашивает по одной странице за раз, и база данных должна отправлять только эту страницу.

skip(n) пропускает первые n совпадений, а limit(n) оставляет следующие n. Страница 1 начинается с начала, поэтому для страницы p пропускаются (p - 1) * size. Отправляй общее количество вместе со страницей, подсчитав его с тем же фильтром, чтобы клиент знал, сколько всего страниц.

// страница 3 журнала ошибок, 20 записей на странице
const entries = await log
    .find({ level: 'error' })
    .skip((3 - 1) * 20)
    .limit(20)
    .toArray();
const total = await log.countDocuments({ level: 'error' });
challenge icon

Задание

Легко

Полка с десятью тысячами книг не поместится в один ответ. Теперь GET /books отправляет по одной странице за раз. Также он сообщает общее количество книг, соответствующих условиям, чтобы клиент мог показать "page 1 of 5".

  1. В server.js измените GET /books. Сохраните фильтры author, from и to.
  2. Считывайте ?page= (по умолчанию 1) и ?limit= (по умолчанию 10). Если один из параметров отсутствует или не является числом, используйте для него значение по умолчанию. Страница 1 начинается с первой книги, поэтому страница p пропускает (p - 1) * limit книг, а затем возвращает следующие limit книг. Поручите базе данных пропуск и выборку записей.
  3. Подсчитайте total в базе данных, используя тот же фильтр. Это количество всех книг, соответствующих условиям, а не только книг на этой странице.
  4. Отправьте ответ со статусом 200 и объектом, а не массивом. GET /books?limit=2 возвращает:
    {
  "items": [
    { "_id": "6720a1f4c2b9e81d3a5f0c11", "title": "Dune", "author": "Frank Herbert", "year": 1965, "isbn": "9780441013593", "genre": "scifi" },
    { "_id": "6720a1f4c2b9e81d3a5f0c12", "title": "Kindred", "author": "Octavia E. Butler", "year": 1979, "isbn": "9780807083697", "genre": "scifi" }
  ],
  "total": 3
}
    Попробуйте: Отправьте GET /books?limit=2: вы получите Dune и Kindred, а также "total": 3. Отправьте GET /books?limit=2&page=2: вы получите только Emma, а "total": 3 останется прежним. Отправьте GET /books?limit=2&page=3: вы получите "items": [] и "total": 3. Отправьте GET /books?author=Jane%20Austen&limit=1: вы получите Emma, а также "total": 1. Отправьте GET /books: вы получите все три книги в items.

Попробуйте сами

import express from 'express';
import { ObjectId } from 'mongodb';
import { books, ratings } from './db.js';

const app = express();
app.use(express.json());

// При каждой ошибке возвращается ответ { error: message }.
function sendError(res, status, message) {
    res.status(status).json({ error: message });
}

// Возвращает :id как ObjectId или null после ответа с кодом 400 при некорректном id.
function parseId(req, res) {
    if (ObjectId.isValid(req.params.id)) {
        return new ObjectId(req.params.id);
    }
    sendError(res, 400, 'Not a valid id');
    return null;
}

app.get('/', (req, res) => {
    res.send('Bookshelf API');
});

app.get('/books', async (req, res) => {
    const filter = {};
    if (req.query.author) {
        filter.author = req.query.author;
    }
    if (req.query.from || req.query.to) {
        filter.year = {};
        if (req.query.from) {
            filter.year.$gte = Number(req.query.from);
        }
        if (req.query.to) {
            filter.year.$lte = Number(req.query.to);
        }
    }
    const list = await books.find(filter).toArray();
    res.json(list);
});

app.post('/books', async (req, res) => {
    const book = req.body;
    try {
        await books.insertOne(book);
    } catch (err) {
        if (err.code === 11000) {
            return sendError(res, 409, 'That ISBN is already on the shelf');
        }
        throw err;
    }
    res.status(201).json(book);
});

app.get('/books/newest', async (req, res) => {
    const n = Number(req.query.n) || 3;
    const list = await books
        .find({}, { projection: { title: 1, year: 1, _id: 0 } })
        .sort({ year: -1 })
        .limit(n)
        .toArray();
    res.json(list);
});

app.get('/books/:id', async (req, res) => {
    const id = parseId(req, res);
    if (!id) return;
    const book = await books.findOne({ _id: id });
    if (!book) {
        return sendError(res, 404, 'No such book');
    }
    res.json(book);
});

app.patch('/books/:id', async (req, res) => {
    const id = parseId(req, res);
    if (!id) return;
    const result = await books.updateOne({ _id: id }, { $set: req.body });
    if (result.matchedCount === 0) {
        return sendError(res, 404, 'No such book');
    }
    res.json(await books.findOne({ _id: id }));
});

app.post('/books/:id/copies', async (req, res) => {
    const id = parseId(req, res);
    if (!id) return;
    const result = await books.updateOne({ _id: id }, { $inc: { copies: 1 } });
    if (result.matchedCount === 0) {
        return sendError(res, 404, 'No such book');
    }
    res.json(await books.findOne({ _id: id }));
});

app.post('/books/:id/tags', async (req, res) => {
    const id = parseId(req, res);
    if (!id) return;
    const result = await books.updateOne({ _id: id }, { $push: { tags: req.body.tag } });
    if (result.matchedCount === 0) {
        return sendError(res, 404, 'No such book');
    }
    res.json(await books.findOne({ _id: id }));
});

app.delete('/books/:id', async (req, res) => {
    const id = parseId(req, res);
    if (!id) return;
    const result = await books.deleteOne({ _id: id });
    if (result.deletedCount === 0) {
        return sendError(res, 404, 'No such book');
    }
    res.status(204).end();
});

app.put('/books/:id/ratings', async (req, res) => {
    const id = parseId(req, res);
    if (!id) return;
    const { user, stars } = req.body;
    await ratings.updateOne({ bookId: id, user }, { $set: { stars } }, { upsert: true });
    res.json({ user, stars });
});

app.get('/books/:id/ratings', async (req, res) => {
    const id = parseId(req, res);
    if (!id) return;
    res.json(await ratings.find({ bookId: id }).toArray());
});

app.get('/stats', async (req, res) => {
    const filter = req.query.genre ? { genre: req.query.genre } : {};
    res.json({
        books: await books.countDocuments(filter),
        ratings: await ratings.countDocuments(),
    });
});

app.get('/stats/genres', async (req, res) => {
    const genres = await books
        .aggregate([{ $group: { _id: '$genre', count: { $sum: 1 } } }])
        .toArray();
    res.json(genres);
});

app.get('/stats/top', async (req, res) => {
    const top = await ratings
        .aggregate([
            { $group: { _id: '$bookId', avg: { $avg: '$stars' }, count: { $sum: 1 } } },
            { $match: { count: { $gte: 2 } } },
            { $sort: { avg: -1 } },
            { $limit: 3 },
        ])
        .toArray();
    res.json(top);
});

app.get('/books/:id/full', async (req, res) => {
    const id = parseId(req, res);
    if (!id) return;
    const [book] = await books
        .aggregate([
            { $match: { _id: id } },
            {
                $lookup: {
                    from: 'authors',
                    localField: 'author',
                    foreignField: 'name',
                    as: 'authorInfo',
                },
            },
        ])
        .toArray();
    if (!book) {
        return sendError(res, 404, 'No such book');
    }
    res.json(book);
});

app.listen(3000, () => {
    console.log('Bookshelf is running on port 3000');
});

Все уроки раздела Базы данных с MongoDB

1Документы

Книга как документКоллекции и базы данныхПодключение к MongoDBЧтение сохранённых документовВставка документовПоиск одного документаПоиск по ObjectIdСравнение чиселФильтры запросовВыбор возвращаемых полейСортировка результатов запросаОставить первые результатыПроекция, сортировка и лимит

4Структура

Модуль базы данныхПагинация в базе данныхУрок-проектПроверка перед сохранениемУрок-проектВстраивание или ссылкиУрок-проект

2Изменение документов

Обновление документовОператоры обновленияУрок-проектУдаление документовУрок-проектУникальные индексыУрок-проектОперации upsertУрок-проект

3Агрегация

Подсчёт документовПоследовательность этаповГруппировка с помощью $groupСредние значения в группахФильтрация результатов группировкиКонвейеры агрегацииОбъединение с помощью $lookup

Потренируйтесь самостоятельно: Песочница Express