Доделать парсер (javascript/node.js)
Мы разработали парсер и сервер для нашего приложения, однако, фрилансер, который работал над проектом, нашел постоянную работу и не может продолжать активное участие в проекте. Он готов ответить на любые вопросы и предоставить информацию о проекте при необходимости.
Тем временем, сайт, данные с которого мы парсировали, изменил свою структуру на next.js. Теперь данные встроены в страницу, и наш текущий метод извлечения данных не работает. В результате, наше приложение лежит полупустым, и мне каждый день пишут пользователи, что надо его починить))
Мы пытаемся внести изменения, но из-за ограниченного времени у фрилансера это может занять длительный срок. Возможно, потребуется использовать алгоритм для анализа текста на странице, так как ранее мы извлекали данные через REST-запрос. Мы ищем опытного специалиста, который сможет нам помочь в этой ситуации.
Сайт, с которого надо парсить данные: https://www.soleretriever.com/ Он весь написан на next.js. Это причина почему мы остановились на pupeteer.
Все данные, которые мы с него парсим, находится на двух страницах:
https://www.soleretriever.com/sneaker-release-date...
https://www.soleretriever.com/raffles
Парсим мы: название, фотографию, цену, дату релиза, а так же ссылки и параметры ссылок. Есть само собой написанная структура данных.
Есть полное ТЗ. Пишите, кто заинтересован - я пришлю его. Не хочу здесь его публиковать.