Pet-project в Data Science (простые идеи для проекта в IT)

Поговорим с вами о pet-проектах, как их выбирать, зачем они нужны и влияют ли при устройстве на работу. Также подкину несколько идей проектов для лучшего понимая, что можно взять в работу.

Конструктор сайтов Creatium

Пример деплоя модельки при помощи сайта

#datascience #petproject

[alpsgrin]

Список незнакомых слов или словарь терминов
Батч его выбор, размеры, Имбединги, Метрики
Фичер инжениринг
Функции активации, какую и когда выбирать, их отличия
Горячие клавиши колаба и юпитер ноутбука, их отличия . панели настроек
AWS и docker кубернетис Flask
Auto ML как подбирать модели для новичков
Гипер параметры как выбирать, покажите примеры кода
Тюнинг моделей что крутить и куда и когда
Ансамбль моделей на примерах, больше кода.
Предобработка данных: чистка, замена, пропуски,
Примеры моделей для работы с аудио, видео, картинками.
Подробней что и куда в OpenCV, больше кода
Пайторч глубже с примерами кода
Циклы, матрицы, Базы данных, как с ORM так и без
Пайплайн, понижение размерности
Матплотлиб как отрисовывать разные виды графиков и подгонять их под разные задачи
Как взаимодействовать с API
L2 Регуляризация, как считать STD, как разбивать на фолды
Как по Hash MD5 находить дубликаты в датасете и вообще применение в питоне
Как улучшить сходимость сети
Дескрипторы от переобучения сети, что делать с оверфитинг?
Как искать сид если не зафиксировал рендом стейт на хорошей модели
Как создавать баундинг бокс
Парсинг и дата майнинг сбор датасетов.
GitHub настройки как им пользоваться как в него загружать свой код, и как с него брать что то

[Randommmname]

Анастасия, было бы здорово осветить тему парсинга данных 👍🏻

[aidarakhmetov]

На днях обнаружил такой способ - можно зайти, например, на хабр фриланс, найти заказы, связанные с датасаенсом и попробовать решить задачу. Идей можно почерпнуть там довольно много. В основном там про парсинг, но и что-то другое появляется

[ivansavchuk]

За такую обложку сразу лайк! Спасибо вам, Анастасия!

[nikolaiandrianov]

Умная, красивая и продвигает науку в массы, это ли не чудо))

[БогданКоваль-ущ]

о, спонсоры подъехали, поздравляю, спасибо за видео!

[paljm]

Если в превью есть котики, то видео обречено на успех. Лойс автоматом.

[alpsgrin]

Анастасия добрый день, из ваших уст это так легко звучит, но нам новичкам сложно без примеров реального кода, покажите что куда и как)) В тему котиков тыкните меня носом, если самые сложные вещи в головах студентов поможете разложить по полочкам то вы не только наберёте подписчиков но и станете одной из единственных на ютубе кто реальные задачи показывает! Вот несколько тем от которых винегрет в голове))) Будем ждать туториалов

[prevedmedvedable]

Лайк за двух кошечек и полезную инфу 👍

[Denis-joyb]

Интересно, каждый день стал смотреть видео... Спасибо. Суть что-то спарсить, и сделать анализ. Или нейронку обучить чему-то... Главная мысль, если не интересно не нужно лезть в эту сферу. Можешь свое мнение написать, или видео запилить про дата сайнс в текущих реалиях, какие тенденции ждут отрасль?

[maximzotov]

Анастасия, спасибо за Ваши видео. Только начал учиться на CS и DS в частности. Есть 2 задумки для pet-проектов, можно узнать профессиональное мнение, стоящие ли они?
1. (Реалистичный) создать приложение для бизнеса знакомого, сделать приложение которое парсит сайт с определëнными товарами в столице и сравнивает с этими же позициями, которые присылают в excel формате из магазинов в регионах (а то на то, что композици чтобы пробить 500+ позиций уходит слишком много времени)
2. (Сложный, но может когда-нибудь осилю) обучить нейросеть для создания караоке из любых песен (текст с сайта genios и создание минуса из композиции)

[KotX]

Добрый день. Хочу сделать генерацию реалистичного фонового шума, например дождь. Не сталкивались ли с статьями / книгами которые могут помочь в этом направлении?

[РусланВетров-сй]

А что если пет проект предназначен только для себя и другим его показывать не хотелось бы? Что в таком случае демонстрировать? Только код на гитхабе без датасета и модельки с описанием каких то общих слов, подходов и проблем с которыми столкнулся? Такое не отпугнет при собеседовании?

[ibobak]

Перед тем, как рекомендовать что-то программно парсить, надо подумать о том, что влетишь в бан после N-го http-запроса на тот сайт, который парсишь.

[smartpax]

тока задумался о своих пет проектах и вот на тебе видео... моё поведение уже что спрогназировали что ли?

[anonymousnothing]

Скажите лучше, где продать свои проекты? Может быть есть какая-нибудь платформа?

[vladrask]

А соревнования kaggle-in-class считаются за пет-проекты?
Например, чтобы быть в топе, иногда приходиться неплохо так потрудиться с данными, особенно если участники сильные

Я интересуюсь альпинизмом, и спарсил данные про Гималаи и экспедиции, данных немало с 1924-2020...сделал классный EDA про Еверест
Вот такой один из моих пет проектов

[KLpoqi]

Чем это тогда будет кардинально отличаться от участия в соревнованиях на Kaggle ? Тем, что данных готовых нет ?

[MrBolat]

То есть можно даже делать пет-проект в механике? P.S. воздушный поцелуй в конце ролика для подписчиков будет?)) очень ждём

[Jure]

Да, видеокартами уже сложно увлекаться, их просто раскупили... Ну и цены жесть...