Прошу прощения, но я бы оспорил исходную посылку "нужно"
Это противоестественно самой идее базы данных.
Если надо сделать выборку окна записей с ...по ...то используем LIMIT
Ну а если всё-таки припёрло, то есть рецепты
http://www.mysqltutorial.org/mysql-row_number/
Заранее спасибо за ответ