{ "time": 1708938299299, "blocks": [ { "id": "rJ1n2M_qxl", "type": "paragraph", "data": { "text": "\n Исследовали рынок Python-разработки: оказалось, что \nинтерес к FastApi растет, а в России высокий спрос на Data-инженеров \n " } }, { "id": "bCBSSmvqby", "type": "paragraph", "data": { "text": "Мы покопались в открытых источниках, и попросили \nпрокомментировать результаты нашего лида Python-направления Альбину \nАльмухаметову. Поехали!" } }, { "id": "pxuyuTPBXZ", "type": "header", "data": { "text": "\n Для чего разработчики используют Python? И какой фреймворк самый любимый? \n", "level": 3 } }, { "id": "K47PONONkT", "type": "paragraph", "data": { "text": "Согласно глобальному опросу JetBrains\n в 2021 году 49% разработчиков используют Python в целях Web-разработки,\n 45% — для анализа данных, 40% — для машинного обучения. По сравнению с \n2020 годом выросло количество разработчиков изучающих Python на 2%. " } }, { "id": "hxY2u0fXG_", "type": "paragraph", "data": { "text": "Данные базируются на основе опроса 31 743 респондентов из 183 стран." } }, { "id": "uJoY0J-vXa", "type": "image", "data": { "file": { "url": "https://storage.yandexcloud.net/technokratos/images/articles/attachments/hwRiYjVKtKr3rSzz2KeFRt.png" }, "caption": "", "withBorder": false, "stretched": false, "withBackground": false } }, { "id": "d-HfSmjBy3", "type": "paragraph", "data": { "text": "Но интереснее не столько область применения, а сколько \nфреймворки, которые используют разработчики. И тут до 2021 года между \nсобой бодались исключительно Flask и Django. До тех пор, пока не \nпоявился FastAPI — новый модный фреймворк, который появился в далеком \n2018 году, но который разработчики распробовали только в 2021 (судя по \nопросу JetBrains). " } }, { "id": "4Atj2dDjKz", "type": "quote", "data": { "text": "FastAPI — относительно новый веб-фреймворк, написанный на языке программирования Python для создания REST (а если сильно постараться то и GraphQL) API, основанный на новых возможностях Python 3.6+, таких как: подсказки типов (type-hints), нативная асинхронность (asyncio). Помимо всего прочего, FastAPI плотно интегрируется с OpenAPI-schema и автоматически генерирует документацию для вашего API посредством Swagger и ReDoc", "authorName": "Выдержка из статьи на Хабре", "authorPosition": "", "authorAvatarPath": "https://storage.yandexcloud.net/technokratos/images/avatars/bNiGvTnD4FPKSbTN2ztQ8w.jpg" } }, { "id": "8tAUV16YOA", "type": "paragraph", "data": { "text": "О любви разработчиков к FastAPI можно судить по опросу Stack\n Overflow (66 000 респондентов) . Наиболее привлекательным фреймворком \nдля разработчиков в 2021 году стал FastAPI. 70% респондентов \nзаинтересовались им, а вот интерес к Django в 2021 году составил лишь \n55%, Flask — 51%." } }, { "id": "K2yMmZpkcG", "type": "quote", "data": { "text": "Думаю, интерес к FastAPI можно легко объяснить его простотой и «фишечками». Фреймворк отвечает большинству хотелок разработчиков и действительно приятен в использовании. Однако, не стоит забывать и про бизнес: его раскачать и перевести на новые технологии так быстро не получится (да и не всегда нужно). Поэтому «старичками» мы будем интересоваться еще достаточно долго.", "authorName": "Альбина Альмухаметова", "authorPosition": "Python-lead, Технократия", "authorAvatarPath": "https://storage.yandexcloud.net/technokratos/images/avatars/RXpQuMCh9ddzDbbWGnivjW.jpg" } }, { "id": "Qq9kPJKJxl", "type": "header", "data": { "text": "\n Кого больше гуглят? \n", "level": 3 } }, { "id": "JyLaLM-WfK", "type": "paragraph", "data": { "text": "Если покопаться в Google Trends и Яндекс Wordstat, то тоже \nможно получить интересные корреляции. Например, если изучить мировой \nспрос на разные Python-фреймворки в Google, то получается, что FastAPI \nискали в 2022 на 50% чаще по сравнению с 2021 годом, и это единственный \nфреймворк, который искали чаще." } }, { "id": "TywhkDXCPm", "type": "image", "data": { "file": { "url": "https://storage.yandexcloud.net/technokratos/images/articles/attachments/NVJSs8czEcUm7UJCezGVDL.png" }, "caption": "", "withBorder": false, "stretched": false, "withBackground": false } }, { "id": "KHvQ_gSB_O", "type": "paragraph", "data": { "text": "В Яндекс Wordstat ситуация аналогичная: самый большой рост \nколичества запросов у FastAPI, но при этом больше всего ищут Pandas, \nDjango и NumPy." } }, { "id": "9uuMjIOiWM", "type": "image", "data": { "file": { "url": "https://storage.yandexcloud.net/technokratos/images/articles/attachments/aRPfkTSg4sr67rkm3p4mwN.png" }, "caption": "", "withBorder": false, "stretched": false, "withBackground": false } }, { "id": "s0NTOUjxPW", "type": "header", "data": { "text": "\n А что с рынком вакансий? \n", "level": 3 } }, { "id": "iJ1Pt8BLhC", "type": "paragraph", "data": { "text": "Python используется не только для Web-разработки, но и \nприменим для анализа данных и машинного обучения. Но что происходит с \nрынком вакансий?" } }, { "id": "NoKJo9quOu", "type": "paragraph", "data": { "text": "Дисклеймер: данные по резюме актуальны на конец марта 2022 года" } }, { "id": "pYsagZ7bE2", "type": "paragraph", "data": { "text": "Мы проанализировали вакансии и резюме на HH. RU и поняли, что\n среди 4500 вакансий с упоминанием стека Python 42,8% из них относятся к\n web-разработке, 32,3% к Data Engineering, 24,9% — Data Science. Но \nспрос на данные вакансии не удовлетворен. Особенно по DE. На 1152 \nвакансии всего 74 резюме." } }, { "id": "9vypqDuFpq", "type": "paragraph", "data": { "text": "Как мы понимали, какая вакансия относится к Web, а какая к DE и DS? " } }, { "id": "D_m6VR4o43", "type": "paragraph", "data": { "text": "В исследовании мы договорились, что будем считать, что \nFastAPI, Django и Flask будем относить к Web, Hadoop, Spark — к Data \nEngineering, а NumPy и Pandas к Data Science. Мы искали каждый фреймворк\n отдельно в HH, а потом объединяли результаты. " } }, { "id": "R2tkFYWl_N", "type": "image", "data": { "file": { "url": "https://storage.yandexcloud.net/technokratos/images/articles/attachments/ExCpJhs5SQMV4krwT4Udax.png" }, "caption": "", "withBorder": false, "stretched": false, "withBackground": false } }, { "id": "--igxtKqwa", "type": "paragraph", "data": { "text": "Если брать направление направление Web, то мы видим, что \nвакансий, где указан фреймворк FastAPI (356), намного меньше чем Django \n(989) и Flask (627). Это говорит о том, что фреймворк был оценен \nразработчиками внутри IT, но до компаний разных отраслей он еще не \nдошел." } }, { "id": "tnJmH2CHYL", "type": "image", "data": { "file": { "url": "https://storage.yandexcloud.net/technokratos/images/articles/attachments/fDzDfoLSSxCJC88ewCduGQ.png" }, "caption": "", "withBorder": false, "stretched": false, "withBackground": false } }, { "id": "rltJkxMfG3", "type": "paragraph", "data": { "text": "Если говорить об удовлетворенности спроса, то самая неудовлетворенная область — это DE, а больше всего спрос удовлетворен в DS." } }, { "id": "9ZdXlFi310", "type": "quote", "data": { "text": "Здесь так же интересно посмотреть на сами вакансии: в большинстве случаев список задач — сборная солянка из dev и ops работы. Кто-то просит настраивать кластера, кто-то помогать писать код разработчикам, кто-то оптимизировать алгоритмы. Кажется, что если отобрать только «чистые» DE вакансии, цифры вполне могут сравняться.В целом есть ощущение, что DE как выделенное направление до нас еще просто не дошло. Ну или каждый понимает эту роль по своему.", "authorName": "Альбина Альмухаметова", "authorPosition": "Python-lead, Технократия", "authorAvatarPath": "https://storage.yandexcloud.net/technokratos/images/avatars/QCFzBikQKcmRsAZ5C9ExNr.jpg" } }, { "id": "wXUc3aL12w", "type": "paragraph", "data": { "text": "В США обратная ситуация. Если апеллировать к данным с \nLinkedIn, то наибольший интерес работодателей направлен на Data \nEngineering. Это связано с тем, что в США «собирать данные» начали еще в\n 80-х годах." } }, { "id": "UAdoRNDem-", "type": "image", "data": { "file": { "url": "https://storage.yandexcloud.net/technokratos/images/articles/attachments/58tRk6UiBtz3dpia5Da29D.png" }, "caption": "", "withBorder": false, "stretched": false, "withBackground": false } }, { "id": "V1ITL6Lq8b", "type": "paragraph", "data": { "text": "Да, популярность Python связана с тем, что он применяется в \nразных сферах: Data Science, Data Engineering, Web. Чтобы эффективно \nутилизировать Python, необходимо задуматься о других направлениях. Легче\n всего из Web можно трансформироваться в DE." } }, { "id": "Uj3fRNAuHi", "type": "header", "data": { "text": "\n Data-инженерам на заметку \n", "level": 3 } }, { "id": "KqP5FulQ1Y", "type": "paragraph", "data": { "text": "Если вы Python-разработчик, которые хочет перейти в Data \nEngineering, то этот раздел будет полезен для вас. Мы спарсили HH.ru и \nвыгрузили все вакансии по запросам: «Data Engineer», «Python Hadoop», \n«Python Spark», «Python Airflow», «Tensor Flow», «Python Pytorch», \n«Python Lua». Связку TensorFlow+Pytorch+Lua мы специально добавили для \nсравнения." } }, { "id": "RJ7R_elBAK", "type": "paragraph", "data": { "text": "Проанализировали полученный массив данных и вот что у нас получилось:" } }, { "id": "QYbElrpIYJ", "type": "list", "data": { "style": "unordered", "items": [ "Среди 1040 вакансий по запросу «Data Engineer» было \nобнаружено 179 таких же вакансий по запросу «Python Hadoop», 229 по \nзапросу «Python Spark», 249 — «Python Airflow»; 52 — «Tensor Flow», 70 —\n «PyTorch»; 5 — «Python Lua».", "Airflow — самый популярный. Tensor flow и Pytorch в Data-инженерии занимает 15,5%." ] } }, { "id": "J3dsg69dPd", "type": "paragraph", "data": { "text": "А вот список компаний, которые требуют от Data-инженера \nвладение сразу четырьмя фреймворками одновременно (Hadoop, Spark, \nAirflow, TensorFlow/PyTorch)." } }, { "id": "bpzDTYLxfh", "type": "image", "data": { "file": { "url": "https://storage.yandexcloud.net/technokratos/images/articles/attachments/T35USjVMgBBBZDmQFSnfKh.png" }, "caption": "", "withBorder": false, "stretched": false, "withBackground": false } }, { "id": "wl8TqACt2F", "type": "paragraph", "data": { "text": "Какие отрасли хантят DE специалистов больше всего? IT, Финтех, Телеком:" } }, { "id": "9pj7G6gT6W", "type": "image", "data": { "file": { "url": "https://storage.yandexcloud.net/technokratos/images/articles/attachments/CpLkdf9q8KscSo5wMKDsHG.png" }, "caption": "", "withBorder": false, "stretched": false, "withBackground": false } }, { "id": "vNgH9_fWWq", "type": "quote", "data": { "text": "Не думаю, что стоит бросать все и переучиваться в DE — вряд ли в ближайшее время Web сильно потеряет свою необходимость и будет смещен с рынка. Однако, следить за тенденциями и подстраиваться под текущие реалии никогда не будет лишним. В целом мы уже взяли вектор на развитие DE экспертизы внутри команды, тем более что технологии этого стека могут использоваться и для наших текущих задач. Например, недавно для одного из наших проектов мы развернули Airflow, т. к. он лучше всего подходил под нашу задачу.", "authorName": "Альбина Альмухаметова", "authorPosition": "Python-lead, Технократия", "authorAvatarPath": "https://storage.yandexcloud.net/technokratos/images/avatars/LjcS73zBA96QBigqtbQk74.jpg" } }, { "id": "9nXqKyFeK4", "type": "header", "data": { "text": "\n Вместо итогов \n", "level": 3 } }, { "id": "4vs-AI9Wa0", "type": "paragraph", "data": { "text": "Python активно используют не только в WEB, но и в Data \nScience, и в Data Engineering. Этот тезис подтверждают данные по опросу \nJetBrains, а также собственный анализ вакансий на HH. ru. Этим и \nобусловлена популярность Python, т. к. он охватывает сразу несколько \nнаправлений." } }, { "id": "S2Vkhv-tKS", "type": "paragraph", "data": { "text": "Python в Web. FastAPI наиболее привлекательный для \nразработчиков фреймворк в 2021 году (согласно опросу Developer Survey \n70% респондентов отметили, что интересуются данным фреймворком) . \nСогласно запросам в Google и Яндекс в 2021-2022 гг. у FastAPI наибольший\n темп роста. Но вакансий по данному фреймворку мало. Это говорит о том, \nчто фреймворк был оценен разработчиками внутри IT, но до компаний разных\n отраслей он еще не дошел." } }, { "id": "aW-fpIKaka", "type": "paragraph", "data": { "text": "Data Engineering. Среди 4500 вакансий по Python ⅓ занимают вакансии по DE. Большой спрос на DE среди компаний, но на рынке мало специалистов. " } }, { "id": "-fTv_39VEu", "type": "paragraph", "data": { "text": "Самые популярные инструменты в вакансиях DE — Airflow, Hadoop, Spark. Airflow — в наибольшей степени." } } ], "version": "2.29.0" }

Исследовали рынок Python-разработки: интерес к FastApi растет