Добрый день. Выглядит странно:
- слева в образовании магистратура, в разделе о себе - «студент первого курса». Так кто вы?
- половина резюме - описание того, где и на кого вы учитесь (я сама например к.ф.-м.н. и это вообще никому не интересно без рассказа о том где работал и что делал). Из блока образование это уже и так видно
- по опыту: функционал вообще не похож на сисадмина, выглядит топорной попыткой притянуть аналилитику туда где ее нет
- про pet-projects: написано как «учусь чтобы учиться», как вариант «пробую полученные знания на практике, развивая харды пока на pet-проектах, но ищу реальный опыт» звучит проактивнее и с акцентом на работу, а не учебу
- не понятно что у вас со временем: учеба, учеба, учеба, время на работу есть?

Читать полностью…

Только картой. Для корпов предложение будет попозже

Читать полностью…

Спасибо. Красивое и элегантное решение.
Странно, что сам не дошел до этого, хотя буквально пару дней назад сделал через PQ для заказчиков на MS Excel self сервис.
В файле указывается список заказов в смарт таблице, которая дальше через PQ превращается в строчку 'value', 'value' и после этого список заказов вставляется в SQL запрос к базе и возвращается в виде таблицы на лист Excel.

В целом PQ хороший инструмент и он умеет отправлять http запросы, а у Clickhouse есть веб-интерфейс, поэтому вполне возможно получится обойтись только только PQ.

Опыт с VBA тоже есть. И он тоже умеет работать с http запросами,.

Еще раз спасибо за интересное решение.

Читать полностью…

Судя по погоде в Москве, Матемаркетинг пройдет недели через три. Он у нас (и у вас 🙂 ) 20-21 ноября.

В связи с этим — early birds билеты!

Здесь можно купить один из 100 ранних оффлайн-билетов.

Это предложение для тех, кто в нас верит, как вы понимаете - так как ни программы, никаких других значимых подробностей у нас пока нет. Оплата early birds билетов возможна только картой, стоит билет 24,9к (в два раза дешевле, чем будет осенью).

А здесь - билет можно оплатить через Сплит. (В ипотеку билеты не продаем. Пока. )


Информация для тех, кто согласовывает командировки и бюджеты:

после early birds билетов цена будет 40к, а с 1 сентября- 50к. И далее, скорее всего, не изменится. Во всяком случае, я считаю цену в 50 тысяч психологической отметкой и буду делать все возможное, чтобы не превышать её.

На площадке: мы вводим новые оффзерекорд-микроформаты, сессии, панельки, брейнштормы и буткемпы.

Компоновка самой площадки тоже меняется - основные залы останутся, но добавятся несколько небольших помещений, а также много открытых пространств, подкаст-студия + будет (наконец-то!) много разнообразного гастрономического опыта (мы согласовали с Кластером запахи еды).

Онлайн-участие претерпит изменения - мы скорее всего, отменим привычный онлайн-доступ и сделаем пакетный онлайн (сразу 5 (новая опция), 50 или 500 доступов). Поэтому, оффлайн-билет будет дешевле онлайна.

И для фана: креативная концепция нового ММ - кино и двадцать пятый кадр (в котором порой скрыто так много интересного)

Спасибо вам за доверие! Ждем!





- Купить оффлайн-билет сразу за 24900
- Оплатить в Сплит

Читать полностью…

Справедливо ли утверждение в вашем случае, что пользователи в 95% случаев льют данные из Excel?

Читать полностью…

Привет.
А чем Python + Airflow не устраивают?

Читать полностью…

Коллеги, может кто-то решал похожую задачу.
Есть желание централизовать импорт ручных отчетов / выгрузок в DWH за счет веб-сервиса для бизнес заказчиков.
Python + Airflow конечно позволяют автоматизировать загрузку любых файлов, но есть желание найти веб-скрипт (можно и платный скрипт) для установки внутри корпоративной сети.

Какой функционал хотелось бы видеть?
1. Сохранение мета информации о том кто, когда и какой файл загружал.
2. Возможность в мастере указать тип данных для полей таблицы.
3. Система должна следить за схемой данных и при необходимости добавлять соответствующие поля в финальную таблицу без потери ранее загруженных данных.

Если коротко, то хочется сформировать единое окно для бизнес заказчиков по загрузки любых табличных файлов и на этапе загрузки сделать валидацию и корректировку данных.

Читать полностью…

Я не вижу смысла покупать книги + на том же степике по SQL сразу же идет практика, мне такой подход больше подходит, но все индивидуально)
Мне технические вещи без практического применения в голову заходят на 3/5, на практике лучше усваивается)

Читать полностью…

Дает глубину. Есть канал такой на Ютубе/ВК "Диджитализируй", автор очень продвинутый разработчик, несколько видео на тему книг есть. Я разделяю его подход. На уровне джуна/мидла, может, достаточно курсов/gpt, но далее книги очень помогают в более глубоком погружении в теме. Не все, конечно, бывают и плохие, равно как и курсы.

Читать полностью…

ИМХО
Особенно нет смысла, для старта есть поколение питон на степике и sql bolt, а всё остальное тоже можно самому, например, через чпт учить

Читать полностью…

Возник вот такой вопрос. Видел, что люди покупают целые книги по питону и sql. В этом есть какой-то реальный смысл? Или всю инфу плюс-минус можно найти на форумах/курсах/в статьях с тем же успехом? Изучение литературы в этом контексте дает вообще какие-то преимущества с точки зрения качества освоения материала?

Читать полностью…

спасибо за комментарии)
а раз дело в рынке, с какого +- отклика вы работу находили? может я нетерпеливая просто)

Читать полностью…

Угу, спасибо за ответ)

Читать полностью…

На какую зп претендуете?

Читать полностью…

с начала весны пыталась подаваться именно с рабочим опытом, без проектов - ни разу не прошла даже на 2ой этап. HR посоветовала добавить проекты отдельным блоком, но все равно тухло(

Читать полностью…

Можно быстро накидать прототип в streamlit. Будет есть файл и грузить python куда надо, как надо, в каком надо формате. У пользователя будет только кнопка выбрать файл и загрузить) там же система авторизации есть(но пока не пробовал).

Читать полностью…

С запросами http да. В целом clickhouse же управляется тоже запросами (создание таблиц, добавление данных в таблицы и т.п.), которые могут быть сгенерированы в PQ.

Читать полностью…

На юр лицо билет по этой цене можно приобрести?

Читать полностью…

Я вам расскажу, как сам сделал. Может вам полезно будет. У меня заняло примерно 2 недели на реализацию всей механики.

В общем-то проблема аналогичная: как просто организовать загрузку в DWH (у меня ClickHouse) и чтобы сразу было везде доступно в других приложениях (кубах, BI и т.п.), с метаданными и всем остальным.
Связка именно Excel/Airflow.
Стек и уровень владения: Excel PQ low, Excel VBA low, Airflow medium, Pandas medium, ClickHouse medium.

Мой результат:
Пользователь нажимает кнопку, через минуту получает сообщение на почту о готовой витрине, данные в отчетах и BI доступны через 5 минут после старта процесса.

В самом Excel в идеале работа должна проводиться с умными таблицами, но если по-старинке "как в блокноте", то дольше.
Юзер работает в Excel и ему вдруг необходимо выгрузить, он запускает макрос на 15 строк, в котором:
- запустить запрос PQ, который проводит валидацию данных и выводит результат ошибок;
- проверяет наличие строк в контрольной таблице, если она не пустая, то показывает юзеру и просит исправить, если пустая, то экспортируется лист с данными в шару/ФТП.

В шару "смотрит" сенсор Airflow и при наличии данных начинает загрузку в Clickhouse, по результатам уведомляет пользователя по e-mail. Здесь, конечено вариаций по передаче данных море.

Как решались озвученные вами проблемы:
1. Валидация данных. Может решаться как на уровне Excel, так и в Airflow - как удобнее.
2. Сбор метаданных.
При формировании выгрузки из Excel с помощью PQ таблица может на ходу обогащаться переменными окружения винды или можно просто доп табличку выгружать на отдельном листе: пользователь, имя компа... Либо при чтении файла с шары можно читать его владельца.
3. Недостающие колонки, полнота и т.п.
Можно решать на стороне PQ прямо в Excel, но у меня сделано при загрузке в CH и используется массово во всех ОАГ:
- Функция описания структуры витрины, где прописаны названия колонок на английском, альтернатива на русском, партиции, сортировка, значение по умолчанию, тип данных.
- Функция, которой входной датафрейм проверяет на наличие необходимых колонок и их полноту, дополняет и исправляет при необходимости, в т.ч. типы данных. Структура же описана.
- Функция, которая создает временную таблицу по описанной структуре.
- Функция, которая загружает во временную таблицу.
- Функция, которая производит замену партиций и/или дополняет убирает лишние из временной в продуктивной. Запускается по ситуации.
- Функция, которая заменяет продуктивную таблицу временной, если вдруг структура продуктивной требует пересоздания. По ситуации.
- Функция, которая создает VIEW на с колонками на русском языке.

Читать полностью…

Хочется найти систему, которая будет выдавать правильный датасет, а все вопросы с валидацией, неправильными данными, типизацией и другими проблемами решать на своей стороне.

Python и Airflow хорошие инструменты, но нужно подстраиваться под каждый файл и туда вряд ли получится затянуть заказчиков, так как у них не хватит компетенций ;)

И проблема с ручными загрузками достаточно частая ситуация в среднем и крупном бизнесе.

Мы работаем с одним субсервисом от достаточно известного и хорошего сервиса.
У основного сервиса есть хорошее API для интеграции их сервиса в DWH. А вот субсервис запустили без API и за полгода так и не смогли написать скрипт выгрузки данных на s3 или ftp.

Читать полностью…

Всю инфу можно найти в инете или дипсике, но мне, например, удобнее читать книгу по интересной теме, тк не надо тратить время на поиск, структурирование и валидацию инфы, тк автор уже сделал это за вас. А в инете удобнее искать ответ на конкретный вопрос.

Читать полностью…

Ну вот да, а если материал ещё и слишком душную подачу имеет, он просто превращается в белый шум)

Читать полностью…

А всё зависит от вас. Я вот покупаю книги. Это привычка.
Именно учебные книги читать электронно не люблю.

Также свои конспекты веду, если какой-то курс прохожу. Там фиксируется часто то, на что было потрачено время, силы и нервы. Потом использую (часто бываю себе благодарна, что всё зафиксировала). Поэтому прислушаться нужно к своим ощущениям. Если норм почитать пдфку, то и отличненько.

Если вопрос, а нужно ли читать или достаточно задачек. Задачек мне лично не достаточно. Их достаточно на прям начальном изучении на стадии "делай вот так, а почему узнаешь потом"

Читать полностью…

есть кто с ардуино работает? подкину халтурку)

Читать полностью…

Привет!
Структурированное резюме 🙂
1. Как сказали выше - проекты убрать в "О себе" - добавить ссылки тогда на каждый проект, чтобы было сразу легко снавигироваться
2. Чисто моё, но всё же - из описанного не очень видно effort от того, что вы делали, не за что зацепиться. как пример

детального анализа показателей и операционных процессов.

- не хватает понимания что это и что могло бы дать компании и почему вы это делали хорошо

участников, сократив время на 50% и расходы, затраченные на аудит.

- время на что не очень легко читается + расходы чего (человекочасов, денег, чего-то ещё)?
Блок

Аналитик в стратегическом консалтинге 

описан очень кратко, не очень понятно, что это даёт с т.з. опыта
3. Опыт обрывается с августа 2024 - встаёт вопрос почему, если там минимально релевантный - ищите что там релевантного что можно было бы подсветить. С т.з. автофильтров встаёт вероятно автоматический фильтр.
4. Автофильтр может срабатывать в том числе на перечисленные клбчевики в вакансиях - стэк, который там перечисляют и не только.

Попробуйте посмотреть какие инструменты чаще всего указывают в вакансиях и с чем вы работали и расширьте описание своих достижений больше в сторону стэка, а не процессности

Читать полностью…

Может убрать доп. образование? Я конечно не думаю что это причина почему вас не приглашают на работу, но у вас замечательное высшее образование, а дополнительное можно озвучить на собесах, если конечно спросят

Читать полностью…

Лучше просто чистыми)

Читать полностью…

150-180, в идеале чистыми)

Читать полностью…

bi или дата аналитик. редко продуктовый

Читать полностью…

1. Уберите опыт работы в компании github, понятно что вы там не работаете. Похвастаться проектами можно в разделе о себе с указанием ссылки на личные проекты.
2. Резюме сделать через шаблон hh

В остальном все норм, рынок прост сейчас такой

Читать полностью…