Автоматизация парсинга сайтов на Python


Промокод на скидку 15% на все курсы ITVDN- H94BCAB
Материалы вебинара- itvdn.com/ru/webinars/description/auto-parsing-python?utm_source=yb_auto-parsing-python

В эру машинного обучения информация становится нефтью 21го века. Проекты, связанные со сбором и анализом данных, выходят на первые позиции в глобальных компаниях и в стартапах.

Как собирать и обрабатывать информацию? В зависимости от целей проекта данные могут собираться абсолютно разные. На вебинаре мы рассмотрим один из наиболее распространенных подходов – парсинг сайтов.

Мы возьмем один из популярных сайтов с рабочими вакансиями и на его примере разберем библиотеки для парсинга веб-сайтов, библиотеки для работы с запросами. Разберем виды популярных баз данных и поймем где и какую нужно использовать.

План вебинара:

1) Что такое парсинг веб-сайтов.
2) Библиотеки для парсинга веб-сайтов.
3) Библиотеки для работы с сетью.
4) Написание кода парсеров.
5) SQL и NoSQL — при каких задачах, какой тип используется.
6) Написание кода менеджеров баз данных.

DevOps на пальцах


На вебинаре простым и понятным языком рассказали, о том какие технологии используются в DevOps, зачем они нужны и как правильно их использовать для создания конвейера разработки.
Подробно обсудили на мероприятии:
• Что такое DevOps: что и зачем
• Обзор ключевых элементов DevOps Toolchain: git, CI/CD, Containers, IaC, Registry
• Построение автоматизированного конвейера разработки в стиле DevOps

Кому интересен данный вебинар:
• Тем, кто никогда не слышал про DevOps, но очень хотел бы узнать, что это такое
• Тем, кто хочется разобраться с техническими терминами DevOps

Спикер:
• Дмитрий Ключников, руководитель направления DevSecOps, «Инфосистемы Джет»
• Антон Гаврилов, эксперт Центра информационной безопасности, «Инфосистемы Джет»
• Александр Краснов, заместитель руководителя Дирекции вычислительных комплексов, сервиса и аутсорсинга, «Инфосистемы Джет»

Как подготовиться и пройти собеседование в IT компанию. Часть 1


Два взгляда: соискатель и HR. Владимир Кузнецов, Александра Чудинова, Сергей Немчинский

Сайт учебного центра: bit.ly/2zoCbuD
Разработка: software.foxminded.com.ua
Web-разработка: web.foxminded.com.ua
Блог Сергея Немчинского: nemchinsky.me

[Ответы] Java Junior реальное собеседование | ООП, Java Core | Часть1


В этом видео я дам ответы на вопросы из первой части видео с реального собеседования на Junior Java Developer.

Видео с собеседованием: www.youtube.com/watch?v=bH3DBnxO4FA

Надеюсь каждому из вас будет полезно послушать информативную часть, а также взять себе на заметку, как примерно нужно отвечать на собеседовании.

Я заранее не готовился к ответам, и отвечал импровизировано, чтобы это действительно было показательно, на монтаже вырезал только те части где я запинался на камеру.

Друзья! Напишите в комментариях какого формата видео вы хотите видеть на этом канале! Постараюсь учесть мнение каждого!

Ссылки на соц. сети:

Facebook — www.facebook.com/cactusprogramming/
Instagram — www.instagram.com/cactusprogramming/
Website — cactusprogramming.com/

Открытое собеседование PHP Point #1 / Валентин Удальцов vs Патрик Фельдеш


О Патрике: career.habr.com/sspat
Код для ревью: gist.github.com/vudaltsov/e6f7dd83a88b349cd5ee0e0d1795e5aa
Задача на SQL: gist.github.com/vudaltsov/e3d06ef2158a248337aa262a9fb60b5f

Большое спасибо Антону Мореву за помощь с трансляцией. Подписывайтесь на его YouTube-канал www.youtube.com/channel/UCnv9T90-w6ZO8dLyVnBzn9A, там интервью, разговоры про IT и опыт.

В Telegram подписывайтесь на наши каналы Пых (https://t.me/phpyh), PHP Digest (https://t.me/phpdigest) и amorev94 (https://t.me/amorev94).

Library vs Framework : В чем разница и как различать?


В этом видео я объясню все основные различия между Framework
и Library. Мы сравним эти понятия и разберёмся с тем, зачем они вообще разделены на два отдельных термина.

На самом деле большое кол-во начинающих программистов в том числе и я в свое время сталкивался с непонимаем того что именно называть framework, а что library.

С первого взгляда оба эти понятия упрощают жизнь разработчику и дают возможность писать за минуты то, что будет написано за часы, а то и дни с нуля.

Я снимаю такие видео, потому что помню насколько тяжело когда только начинаешь осознать то огромное кол-во новой терминологии, которая встречается в книгах и обучающих статьях. Надеюсь это видео поможет вам структурировать информацию.

Пишите в комментариях свои вопросы, будет общаться :)

Таймкоды:
00:39 — Framework
03:06 — Library
05:23 — библиотеки для коллекций Java
05:41 — Итоги. Framework-это?
06:15 — Библиотека-это?

Соцсети:
www.instagram.com/itwithvitaly/
www.facebook.com/itwithvitaly

Асинхронный Python-код медленнее обычного кода! Ааа!!1один. Aiohttp VS синхронные фреймворки


Запускаем мощную платную обучающую программу, интересно принять участие? Пройдите опрос — simpoll.ru/run/survey/c44b6a04

Сказать спасибо можно здесь — boosty.to/digitalize.team

А точно ли вообще асинхронность в питоне нам нужна? Есть мнение, что старые добрые синхронные веб-фреймворки на Python таки работают быстрее и надёжнее. Давайте проверять!

Две упоминаемые статьи:
habr.com/ru/post/440282/
habr.com/ru/company/ruvds/blog/507570/

0:00 Популярные тесты производительности Python веб-фреймворков
3:49 Разворачиваем проект под тесты
6:39 Запуск тестов Aiohttp
9:05 Запуск тестов Meinheld с Falcon
10:40 Aiohttp сливает, асинхронность отстой:(
11:22 Или нет?
12:02 Изменим тесты и проведём их снова
14:38 Ёлочки-палочки, что происходит? Почему?
17:15 Мультипроцессинг, мультипоточность, асинхронность — когда что использовать?

/****************** about ******************/

Меня зовут Алексей Голобурдин, я программирую с 2004 года и на этом канале делюсь своим опытом. Я основатель и руководитель компаний:

— Диджитализируй digitalize.team, разрабатываем сложные IT системы для бизнеса;
— Salesbeat salesbeat.pro, комплексный модуль доставки для интернет магазинов.

Если у вас есть проект на разработку, пишите нам на hi@digitalize.team.

С другими предложениями, а также если вам нужна одна или несколько индивидуальных консультаций/уроков по разработке (3000 руб/час), пишите мне на alexey@salesbeat.pro.

Мои соц сети:
www.facebook.com/a.goloburdin
www.instagram.com/alexeygoloburdin/
vk.com/a.goloburdin

---

Повелся на большую зарплату


Почему деньги не могут быть главной и единственной мотивацией и что случилось, когда я повелся на большую зарплату.

Поддержать канал: www.patreon.com/seniorsoftwarevlogger
Сайт: seniorsoftwarevlogger.com
Футболки: teespring.com/stores/senior-software-vlogger
Моя техника и другие штуки kit.co/seniorsoftwarevlogger/my-setup