scrapetasks

UPDATE: Задачи перенесены в репозиторий Хаба открытых данных - https://github.com/infoculture/hubofdata/issues Задачи сообщества по сбору и извлечению данных из официальных источников / Community tasks to collect open data from official sources

Главное отличие этих задач от других которые мы собираем:

• они однократные, их не нужно повторять
• они про создание общественного блага
• они не про создание пользовательских интерфейсов и продуктов

Если у Вас есть задача по сбору данных которая не упомянута в общем списке https://github.com/infoculture/scrapetasks/issues - пишите на [email protected] и она там появится или зарегистрируйтесь на github и добавьте её самостоятельно.

Если у Вас есть свободное время или желание поучиться сбору данных с сайтов - то берите на себя любую задачу и пишите если есть вопросы.

Как писать скрипты/программы для сбора данных ?

В каталоге Awesome Web scraping https://github.com/lorien/awesome-web-scraping собраны инструменты для всех наиболее популярных языков программирования и приведены примеры того как пишутся программы для сбора данных с сайтов (web scraping).

Где ещё найти интересные задачи?

В репозитории datatasks собраны задачи https://github.com/infoculture/datatasks/issues для участников конкурсов, спринтов и хакатонов