Шаблоны
Сайты, где сбор данных разрешён правилами и robots.txt: открытые данные, наука, учебные песочницы. Для своих сайтов сохраните шаблон в панели и поделитесь ссылкой.
Песочницы
Книжный магазин-песочница
1000 вымышленных книг с ценой, наличием и рейтингом, по 20 на странице. Идеальный первый шаблон: учит собирать карточки и проходить по кнопке «Далее».
кнопка «Далее»quotes.toscrape.comЦитаты: песочница
Цитаты известных людей с автором и тегами, постраничный вывод. Показывает, как собирать списковые элементы с несколькими тегами.
кнопка «Далее»quotes.toscrape.comЦитаты: бесконечная прокрутка
Те же цитаты, но новые подгружаются при прокрутке. Шаблон для отработки сбора со страниц с бесконечной лентой.
бесконечная прокруткаwebscraper.ioКаталог авто: кнопка «Показать ещё»
Тестовый каталог автомобилей с годом, страной, пробегом и ценой; товары догружаются кнопкой «Load More». Учит работать с кнопкой подгрузки.
«Показать ещё»webscraper.ioКаталог авто: бесконечная прокрутка
Тот же тестовый каталог авто, но позиции подгружаются при прокрутке. Удобно проверить, что расширение дожидается новых карточек.
бесконечная прокруткаscrapethissite.comСтатистика хоккейных команд
Таблица сезонной статистики хоккейных команд с номерами страниц и поиском. Шаблон для таблиц с пагинацией через номера страниц.
номера страницscrapethissite.comСтраны мира: песочница
Около 250 стран со столицей, населением и площадью на одной странице. Самый простой шаблон «одна страница — одна таблица».
одна страницаОткрытые данные
Википедия: страны по населению
Таблица стран и территорий с населением, долей от мирового, датой и источником оценки. Готовая база для аналитики и инфографики.
одна страницаru.wikipedia.orgВикипедия: города-миллионеры России
Города России с населением более миллиона: место, численность, прирост к переписи 2010 года. Короткая и аккуратная таблица на русском.
одна страницаdata.worldbank.orgВсемирный банк: перечень индикаторов
Индикаторы Всемирного банка, сгруппированные по 20 темам, со ссылками на данные. Удобная карта показателей для исследований и отчётов.
одна страницаwiki.openstreetmap.orgOpenStreetMap: справочник тегов
Справочник основных тегов OpenStreetMap: ключ, значение, тип объекта и описание. Нужен всем, кто готовит выгрузки или фильтры по OSM.
одна страницаГосданные
Data.gov: каталог наборов данных США
Более 400 тыс. открытых наборов данных США: название, ведомство, дата обновления и форматы. Помогает быстро составить подборку датасетов по теме.
«Показать ещё»mintrans.gov.ruМинтранс России: открытые данные
Перечень наборов открытых данных Минтранса (около 36, все в CSV) на одной странице. Отправная точка для транспортной аналитики.
одна страницаminfin.gov.ruМинфин России: реестр открытых данных
Реестр из 100+ наборов открытых данных Минфина со статусом, числом скачиваний и датой обновления. Удобно найти актуальные финансовые датасеты.
одна страницаmchs.gov.ruМЧС России: открытые данные
Таблица наборов открытых данных МЧС с просмотрами, скачиваниями и датой обновления. Небольшой, но аккуратный шаблон для госпорталов с такой же вёрсткой.
одна страницаНаука
Технологии
Википедия: список языков программирования
Алфавитный перечень языков программирования со ссылками на статьи. Подходит как справочник или затравка для обогащения данными.
одна страницаcran.r-project.orgCRAN: все пакеты R
Полный алфавитный список пакетов R с кратким описанием на одной странице. Пригодится для каталогов инструментов и сравнения экосистем.
одна страницаpeps.python.orgPython: указатель PEP
Все предложения по развитию Python (PEP) с номером, статусом, названием и авторами. Удобно отслеживать принятые и отклонённые изменения языка.
одна страница