Моча ток не бань плиз, тут Сандра взрослая уже, так что всё легально!
Ну инженегры, вычо, жалко что ль? Поясните за мужичка и курс!
>4
Да ты посмотри на эту мерзкую рожу, фу бл
Пошёл на хуй, уёба. Сначала пройди курс, потом на двач сри.
Дата инженегр в треде.
1) Вкатунов дохуя
2) Специалистов мало. Вакансия мидла, если искать вменяемого, закрывается месяца за три. Кандидатов на мидлов много, но они в основном нулевые. Вакансия сеньора помидора может закрываться сколько угодно, и когда на собес приходит шарящий чувак, обычно либо ты его уже где-то встречал, либо ты знаешь чувака, который с ним знаком, лол.
3) Вкатуны "с улицы" при этом обычно нахуй никому не сдались. Если уж так сложилось, что решили взять джуна, и при этом некого перетащить внутри компании из смежных позиций, то за те же бабки можно взять мидла питухониста и по специфическим технологиям по ходу дела подтянуть.
Дефолтный путь попадания в дата инженеры у всех, с кем я работал (включая меня самого): занимался чем-то другим -> пересекся с датой -> постепенно стал делать больше таких задач -> укатился в дата инженегры. Многие из аналитиков постепенно перекатились.
В принципе, если очень хочется, можешь попробовать вкатиться в крупные компании. Например, в Леруа Мерлен Лемане Про, вроде, было много обезьяньей работы, на которую брали кого попало. Теоретически можно попробовать пробиться в такую хуйню, поднабраться опыта, а потом уже дальше двигаться. Но это я уже теоретизирую, я сам этот этап пропустил.
Алсо, последнее время на собесах стали появляться чуваки с неподтверждаемым опытом, которые пытаются пройти собес то ли с ментором, то ли с чатом гопоты. Это выглядит убого и палится пиздецки. Может с какими-то ебланами собеседующими у кого-то и прокатит, но у меня лично с таких кандидатов жопа пригорает из-за проебанного времени.
Бля, обожаю такие ракурсы на фотках с тян. Кто в курсе как гуглить?
> Пайтон уже знаю
Скорее всего, тебе кажется. Но невротебаться знания питухона на вакансиях ниже сеньора обычно и не требуют, так что похуй
> и основы SQL уже знаю
А вот тут основ будет мало. Ковыряй глубже, плюс изучай особенности распространенных СУБД. Для Россеюшки сейчас дефолтом будут Гринплам и Кликхаус. Алсо, покури Трино - это SQL движок, который сейчас прикручивают поверх всего подряд
> Airflow
В большинстве вакансий это дефолт. Но некоторые вместо него используют Дагстер. На самом деле похуй. Тут главное осоновные понятия вкурить, а дальше, при условии что у тебя действительно есть знание питухона, разберешься что в Эирфлоу, что в Дагстере
> Pandas, HADOOP, Spark и тд.
Знать надо для общего понимания. Пандас больше аналитики дрочат. Хадуп и Спарк используются, но постепенно всё больше в легаси остаются
Запиши в список еще DBT, Airbyte, Debezium, Kafka. Методологии проектирования хранилищ почитай.
ЛЮБУЮ КОДОХУЕТУ БУДЕТ КОДИТЬ НЕЙРОСЕТЬ
>БУДЕТ КОДИТЬ НЕЙРОСЕТЬ
До того, как научится буквы в словах считать, или после?
Спасибо за развёрнутый ответ.
Ну что поделать. Я тоже буду волчить. Разумеется, не нулёвым. Сперва проучусь как следует месяцев 6-8, потом буду откликаться на всё подряд.
> Что думаете про вкат в Data Engineer?
Хуй соснёшь, слишком нишевая профессия, почти все вакансии закрыты, новые не появляются, а если и появляются, то нужны люди с опытом.
> БУДЕТ
Каково тебе работать бесплатным маркетологом нейроговна?
"Оголена Спляча дівчина ass"
"Curvy blonde on Bed ass"
"butt lying down"
Как и любая специальность от аналитика(дата всмысле) до мл хоть ресерчера, требует навыка того, что подразумевает эта работа, а не "стек".
Т.е. условно ты там sql, хадуп, спарк ололо. А делать то что с этим будешь? Вот как ты себя продашь? Или мл такой джун якобы приходит и ололо тенсорфлоу, пандас, питон, склерн, хуерн, а сделать ты что-нибудь можешь? И они не могут.
С девопсами может быть такая же проблема, когда челик учит инструменты вместо "инфраструктурных подходов к обеспечению..."
Короче проще, быстрее и прямее стать просто разрабом.
Но братишка с 4 пика говорит, что со знанием SQL ты всегда с куском хлеба будешь. Не DE, так аналитиком.
>Data Engineer
>29 лвл тнн рнн сыч лист шыз
Разраб, тестер, дизайнер, видеомонтаж, наебизнес, криминал - вот твои варианты, а свою хуйню выбрось нахуй. А теперь пошел вон.
Имей в виду, что аналитику по хорошему надо еще всякую специфическую для них математику знать. Подробнее не расскажу, потому что я с другой стороны зашёл и аналитиком не работал. Но, судя по тому, какие там периодически ебланы встречаются, порог вхождения у них довольно низкий.
От третьего пика захотелось расчехлиться
>29 лвл тнн рнн сыч лист шыз
А нахой те работа то тогда? Там общаться придётся гораздо больше чем с технологиями возиться, особенно по первой, с нормисами разного уровня доходов и нормисности.
Ну я тоже когда-то был хикканом сычем, только лет через 7 привык быть нормисом пиздаболом (и в том и другом смысле, без хороших навыков пездежа и пиздёжа по карьере с каждым разом всё сложнее продвигаться).
Староват ты уже чтобы вкатываться во всё это дерьмо.
Ну ладно, а что насчёт 1С? Вроде для 1С возраст 30-35 лвл это идеально. А мне как раз 29 летом будет. К концу лета уже джуном буду. Ну, по крайней мере так везде пишут, что там 2-3 месяца и ты джун с зп 80к.
1с зачастую это три профессии с 3мя разными ответственности и спектрами задач у одного человека. Ты условно и менеджер, и аналитик, и программист, и даже сраный эникей.
Ты не так подходишь к выбору вообще, это не работает через призму "это кажется более простым чем это" или "это кажется более интересным чем это" или еще как.
И к концу лета ты джуном не будешь, если конечно у тебя не бэкграунд в образовании или каком-нибудь не проггерском айти. Ты въебешь примерно 80% времени обучения в то, чтобы понять как надо обучаться и потом только за 2-4 месяца станешь джуном. Обычно у средне-кекса это занимает год без учета того сколько он потратит на отклики и собесы.
Катись в с++ и делай игры, щас одно говно выпускают, сделаешь мисайд очередной налутаешь миллионы $.
Ты чё гониш. В 1С хватит месяца даже чтоб джуном стать.
Начнем с того что 1с душная хуита говна, бухгалтерски складская, нахуй надо я както краями касался этого говна и пукнул. Плюс это спец контингент, ебаные бухалтеры тети сраки которым надо писать инструкции уровня нажмите левую клавишу мыши.
Да пиздит этот петух, все эти вакансии существуют только в крупных фирмах, а их в рабсии чуть больше чем нихуя, мест нет. Может тебе повезёт найти место джуна, а может и нет.
Можешь попробовать залететь просто на бек, заучив все популярные хранилища данных и немного CURD хуеты на них.
>Имей в виду, что аналитику по хорошему надо еще всякую специфическую для них математику знать.
Там кроме математики и профильного образования ничего не нужно, все фреймворки и либы "учатся" за два дня чтения доков.
Вкатывайся, если готов жрать говно ближайшие пять лет. Датаинженеринг без работы звучит лучше чем работа 1с.
Фулл нейм скажи
Годная профессия. Без 300кк/нс не останешься.
дата саентист
Sandra Orlow
> если готов жрать говно ближайшие пять лет
В каком плане? Вроде по деньгам там сейчас всё хорошо.
Н у и куда катиться-то?
Тоже интересно , какой стул в рабсии выбирать:
катиться в классического прогера на react или go/питухон
выбрать 1С и уже получать 80к, потому что спрос сверхогромный, везде использует в любой шаурмечной. Это как в нулевых сайты на пхп+ wordpresse , почти всем надо.
>Airflow, Pandas, HADOOP, Spark
это все бигдата стек, можно вкатиться etl-разработчиком в компанию поменьше, там вообще по сути кроме sql ничего не надо знать, а зп сопоставимы
мимо на MS стеке в ритейле хранилище разрабатываю
Пили гайд как вкатиться.
Объясните не айтишнику, что значит дата инженер? Типо инженер по данным? Звучит как бред. Как будто никто другой не работает с данными и базами.
>Пили гайд как вкатиться
я 10 лет назад вкатился, не мне пох на проблемы вкатунов
Ну если верить Илье Мэддисону, то он стал успешен в своё время, потому что не было конкуренции. Поэтому он советует идти туда, где они низкая. В случае с айти это конечно же 1С.
Другое дело, что в таком случае с высокой долей вероятности ты лишаешь себя возможности на иммиграцию, т.к. 1С кроме РФ и КЗ нигде не нужен больше.
1) Понятно дело, что есть компании, которые разрешают работать удалённо из любого уголка планеты. Но таких компаний мало.
2) ЗП скорее всего не хватит, чтоб нормально жить в развитой стране. Надо хотя бы 5к баксов в месяц иметь - 1.5-2к на съём и 500-1000 на еду. Остальное это покупки, медицина и прочее.
Вот какой потолок в 1С? 400к рублей? Ну может 500к. Это прям суперпупер предел. Наверное если не особо стараться, то предел 350-400к. То есть 3-4к баксов. В другой стране придётся не жить, а выживать. Это грустно.
И ещё - конечно, есть возможность в свободное время учить какой-то норм стек для переезда. Но это ты скок учиться будешь? ГОД? ДВА? После работы. Лул. Прикинь - два года вообще без свободного времени. Нахуя? Лучше сразу выбирать - остаёшься тут или уезжаешь. 1С или "тру"-стек.
Ну ты же очевидный биомусор, учебник по математике последний раз видавший в школе, про что посложнее, вроде теории баз данных или матстатистики, вообще молчу. Куда тебе датасаенс, нахуй ты там такое кому нужно? Просто попробуй предоставить себе работодателя, который на должность не кислого инженера для обеспечения работы дорогих сайнтистов что-то такое чмошное возьмёт: мне вот лично такое маловероятным кажется.
Впрочем, научпоп свой можешь посмотреть, если свободного времени много.
мимо старший продакт
Мне в целом похуй на всё. Если работать удалённо, то никто тебя не призовёт воевать. Главное из дома не выходить.
Но вот проблема исламофашистов и мигрантов меня очень пугает. Я не хочу в 50+ лет оказаться одним "белым". Это ж пиздец ужас. Из-за этого и не могу решиться на 1С. А в других стеках там пиздец конкуренция по 1000 человек на место - слишком нервно.
В 1С тебя с распростёртыми руками примут.
> научпоп
Там ничего сложного на самом деле. Дата инженер это не дата сайнтист. Надо только глубоко разбираться в SQL и уметь писать код на пайтон.
Это в DS надо вумным быть.
Ты просто никогда ни приличного инженера, ни приличного сайнтиста не встречал. А на обезьян ровняться - ну такое, каждый под себе выбирает.
вкатывайся в битрикс
Вот такая же проблема с 1С, т.к. русский мир с каждым днём становится все непредсказуемей и безумей. По хорошему, хотя бы в КЗ или монголию свалить надо бы, даже к узбекам, у них тоже айти есть и развивается.
В других стеках конкуренция, сразу за айти образование инженерное спрашивают, причем не важно ты недоадмин на линуксах в хостинге, девопсер, ручной тестер или условный формошлеп.
в 1С из за спроса и то что везде стоит в каждом ларьке худо бедно работа будет, за образование только всякие крупняки и банки спросят. Конечно, не хочется выбираться с говен, чтобы потом помимо прогерства еще нервы рвать с тётками сраками, закрывая эникейские вопросы по типу предоставления настройки доступов, настроек сети, свичей, маршрутизаторов, впнов, проксей и прочего админского мусора, который не ценится от слова совсем, воспринимается как должное.
Андроед разраб в треде.
Проебешь кучу времени и дропшнешь, лучше пивка попей или в зал сходи.
Тем более, если у тебя нет кореша\ментора, который будет помогать - ты охуеешь все это разгребать.
Так что вот этот господин
Все правильно расписал.
Про твои "Пайтон и основы SQL уже знаю, так что быстро половину проскачу".
Айтишка это бездонная хуйня, я когда в свое время учился, писал пет проекты, ебашил чисто по современным стекам, думал ну ебать, да я все шарю и понимаю, первые приложения написал, да я все могу нахуй!!!
В итоге когда влетел в первый проект обоссался и обосрался от количества легаси говна, тем в которых нужно разбираться и от общего потока информации, который тебе надо усвоить.
Тем более сейчас, когда вкатиться стало охуеть как сложно, зп у джунов милипиздрические - вкат в ойти в целом того не стоит.
Проебешь кучу времени и дропшнешь, лучше пивка попей или в зал сходи.
Тем более, если у тебя нет кореша\ментора, который будет помогать - ты охуеешь все это разгребать.
Так что вот этот господин
Все правильно расписал.
Про твои "Пайтон и основы SQL уже знаю, так что быстро половину проскачу".
Айтишка это бездонная хуйня, я когда в свое время учился, писал пет проекты, ебашил чисто по современным стекам, думал ну ебать, да я все шарю и понимаю, первые приложения написал, да я все могу нахуй!!!
В итоге когда влетел в первый проект обоссался и обосрался от количества легаси говна, тем в которых нужно разбираться и от общего потока информации, который тебе надо усвоить.
Тем более сейчас, когда вкатиться стало охуеть как сложно, зп у джунов милипиздрические - вкат в ойти в целом того не стоит.
Тем более если ты 29 лвл тнн рнн сыч лист шыз то точно дропа нахуй.
Если ты норм чел, есть хоть небольшой шанс попасть за счет софт скиллов и обучаемости. Но ты явно не из тех.
Если ты норм чел, есть хоть небольшой шанс попасть за счет софт скиллов и обучаемости. Но ты явно не из тех.
Так некуда больше. Милипиздрические зп относительно кого? Я не знаю где платят больше и чтоб на удалёнке.
Да я понял уже, что датаинженеринг это нереалистично. Вот думаем про 1С с пацанами как видишь.
Тут зп опупенные вон какие - 80к у джунов. Я уже буду королём в своём посёлке, если столько зарабатывать начну!
Скучная хуйня, вздернешься от такой РАБоты.
Куда тогда вкатываться?
В смысле блять некуда?
Ты в каком регионе живешь?
Тем более, если ты джун, попасть на удаленную это блять практически анриал.
У нас в СПб почти нет вакансий на джунов в мобилках, а если и появляются-строго офис, нахуй.
Ну кстати, это сейчас выглядит самым адекватным, если хочешь вкатиться.
По крайней мере это тоже язык программирования, оттуда может и сможешь перекатиться как-то.
Ну, либо как Варик, если сво закончится,а рф придут иностранные компании и рынок айтишки опять начнет расти, то может и дата инженером получится вкатиться.
Но я вот в это все очень не верю.
Можно 117 позвонить. Там весело, лул.
Нахуй, очевидно же
в целом айтишка это душная хуйня.
Везде одни и те же действия, которые страшно заебывают, ты, по сути, ничего не создаешь,а дрочишь старый код, попутно что-то улучшая.
Ну они вернутся наверно когда-нибудь. Но думаю для меня уже будет поздно. То есть мне уже лет 45-50 будет. Нахуя мне куда-то в таком возрасте уже будет вкатываться?? Только в гроб ёпты.
Если 1С, то надо навсегда оставаться в РФ и не рыпаться. Но тревожно конечно. С другой стороны, может реально потом будет с деньгами поспокойнее и я вкачусь куда-то ещё. 1С это же необязательно конец жизни.
В бомжи.
Сетевой инженер/администратор серверных систем
> Нахуя мне куда-то в таком возрасте уже будет вкатываться?
А к этому времени ты уже планируешь выйти на пассивный доход и закрыть все свои потребности? Если так, то, конечно, никуда не надо.
>Только в гроб ёпты
Тут соглы.
40-дед
Мне кажется, что с 1С будет легче перекатиться куда-то в другое направление.
Ты не забывай, что даже если ты станешь датасайнтистом, ананистом и т.д. - без знания английского перекатиться на иностранную компанию будет невозможно.
Со знанием, если ты хороший спец то надо постараться,а тут блять переехать он захотел, епты)))
Тем более, сколько сейчас айтишники получают в рф, ну потолок 400-500. С такой зп норм только жить в какой-нибудь Азии, но ты охуеешь там жить и один хуй вернешься обратно в рф.
В биг дате дохуя разнообразных источников этих самых данных, ебейшие объемы и сценарии использования, подразумевающие, что читать будут тоже дохуя. Алсо, надо сводить всю помойку данных, полученных из слабо связанных между собой источников к юзабельному виду. И чтоб нигде ничего не проебалось по пути. Это всё требует специфических подходов, процессов и инструментов. Эт так, если верхнеуровнево.
А где недушно? В разработке нейросетей куда идут чеиырехглазые нёрды?
Лол, я 3 года назад когда вкатывался обошел джунские вакухи, меня везде развернули и условия вообще так себе, в итоге крутанул и залетел с 8го собеса, сейчас я вроде как помидор
Но да, 100% согласен, у нас эти сториборды, конструктор этот ебучий во всех проектах, хоть и считается нормой писать юай кодом, куча обжухи в подах, и что проект куда я попал написан на какой-то фронтовой архитекруре о которой даже нигде не было написано
айосник
>Спляча
Що за йэзыг?
Три года назад и небо было голубее и трава зеленее, некоторые банки даже в эпсторе висели.
Сейчас Джун айосер это в принципе атавизм, который вымер и нахуй не нужен, чтобы вкатиться надо знать то что знает мидл, при этом налетать себе хоть где-то, хоть какой-то опыт на реальном проекте.
ты ебать какой долбоеб тупорылый потому что эта профессия форсилась как перспективная года 4 назад. щас либо будешь ебашить как конь, либо хуй пососешь
Да не, ерунда, на все три уровня спрашивают одно и то же, только помидора спрашивают еще и кейсы/решения
Так что что джун отвечает чем класс от структа отличается, что мидл, что и помидор, и все три так же декларируют как работает ARC
Поэтому тогда и было зелено - ты что вкатуном, что с опытом - устраивался идентично, надо было только у живого айосника за пиво пару кейсов спиздить, я кстати кейс спиздил который меня заставлили на второй месяц делать
Сейчас бы я симулировал опыт и тренировался бы на приложении телеги, она открыта, взял дописал экранчик или какую-нибудь сортировку контактов, что-нибудь, ничем не хуже того что я делаю каждый день.
А куда шас вкатываться?
УЧИ GOLANG БАЗАРЮ С УЛИЦЫ НАБИРАТЬ БУДУТ
Не читал тред, но уверен на 99%, что минимум половина отписавших отписались в соответствии с пикрил
Чё ебанулся что ль? Я вон линух пытался, всё пыжился, очень тяжело. Мозг болит нахуй пиздец. Максимум мог по 2 часа в день изучать.
А там ведь ещё и сети дрочить. От сетей у меня вообще голова кругом едет. Как их понять ваще? Это ж тонна текста асбтрактного. Тупа как зубрилка ебаная учишь этот кал непонятный.
Пробовал я Андрюху смотреть. Ну он норм пацанчик-то. Но по факту - я не осилил даже половины.
Кароче не, я тупой для этой залупы всей. Мне ток 1С максимум.
Так 1с сложнее
Я порой задумываюсь, и ору в голос со всей этой IT хуеты.
Буквально, кто-то дрочит ГОДАМИ, пытаясь устроится хоть куда нибудь, кто-то на галерах обменивает жизнь на опыт в резюме. А кто-то волчара, напиздел с три короба, и спокойно лутает зп.
Можете объяснить, как так выходит, что с обычных рандомхуев спрос, как с команды спасения галактики, а всякие проходимцы, тнусы, чурки и прочий скам, заходит на харизме, и лутает бабки?
Прикольная роль, сам хочу перекатиться из аналитика
это онли FAANG и для помидоров. Плюс те, кто в теме, говорит что хуета похуже условного JS и для микросервисов он получше будет, т.к есть node js+type script. Если нужна серьезная производительность, используют сейчас на западе Rust.
я прав?
Если опыта работы нет - пойдешь нахуй быстро и решительно. Все курсы что я смотрел - тупая и убогая залупа.
12 лет стажа в ит, дата инжир последние 5 лет
>
Если опыта работы нет - пойдешь нахуй быстро и решительно.
Это база сейчас в найме.
Всегда так было.
Кто-то в 1500 году ходил по городам с тремя кубками и наёбывал простых жителей по кайфу. А кто-то работал всю жизнь за три копейки.
Ну и тут важно красиво сыграть свою роль. Тебе что, так сложно идеально отыграть на камеру?? Причём у тебя дохуя попыток. Можно до бесконечности траить. Просто покупаешь новый номер нахуй, новый парик, выдумываешь новую легенду и пиздуешь собеситься.
Пока это не пофиксят, НИ У КОГО В ЭТОЙ СТРАНЕ НЕТ ОПРАВДАНИЯ ЕГО НИЩЕТЕ!!!!!!!!
Вот это жооооопа у Сандрочки. Как же она выросла прям 1в1 мать. Круто. Не всегда так выходит ведь.
>>>Пайтон и основы SQL уже знаю, так что быстро половину проскачу.
Ну это на его курсе только половина. А вообще это только 10% от того, что нужна знать, не больше.
>>>Какие-то Airflow, Pandas, HADOOP, Spark и тд
А ещё git, docker, (Linux | Bash | cURL), Java или Scala, Kafka, Hive, ClickHouse, Greenplum. Умение мыслить как инженер, чтобы грамотно строить DWH. Затем учится отдельно проходить собеседования, красиво говорить.
Если хочешь оставь телегу, будем вместе вкатываться.
>>>Кандидатов на мидлов много, но они в основном нулевые.
Что ты под этим имеешь в виду?
Справедливости нет, таков мир, пока вырасти.
То есть курсы это БАЗА?
> заходит на харизме, и лутает бабки
Чел. Это основа жизни кагбэ.
>будем вместе вкатываться
Ты тоже вкатун или поменторить хочешь?
>Сандра
топ на все времена
>дата инженер
хуй знает, сам питонист но бекендер. есть подозрение, что дата инженером быть не весело, будешь всякие парсеры писать (а они часто ломаются)
В питоне сейчас жопа с поиском работы и возможно многие питонисты переключатся на дата инженеров и будет сложнее попасть, но это в не точно
> git, docker, (Linux | Bash | cURL)
Ну это нынче дефолтная хуйня для любой мейнстримной разработки. Нет смысла её отдельно перечислять. Да и прям "учить" для джуна там особо нечего.
Бля, я всех своих подчиненных в мелкой компании учу гиту и башу))))))))))))
В ебаном бигтехе деду который выше меня по грэйду и зп тоже пришлось показывать что такое гит и как с этим работать.
Не надо недооценивать тупость пидорах. В огромном количестве компаний код просто валяется в папочках и никакого гита нет.
>В питоне сейчас жопа с поиском работы
расскажи поподробнее
Смотрю в своей мухосрани он идет топ 2 по кол-ву вакух после божественно 1ass
> Что ты под этим имеешь в виду?
В основном, что-то из трёх вариантов:
1) Перекатун из аналитиков. Может быть хороший SQL и софт-скиллы, но всё остальное на уровне "где-то что-то слышал/читал, но сам не пробовал".
2) Чувак, у которого предыдущий опыт только в узких однообразных задачах, за которые он не вылезал, и ни во что глубже не погружался. На собесе все ответы в духе: "Этим занимался кто-то другой".
3) Кандидат с приличным формальным опытом, но застрявший надолго в одной конторе в каком-нибудь ебучем легаси. На собесе с гордостью рассказывает как они построили какую-нибудь лютую архитектуру из велосипедов на костылях. По актуальным инструментам и технологиям знания на уровне "где-то что-то слышал/читал, но сам не пробовал". Вообще, таким сложнее всего работу сменить, потому что надо либо подтягивать скиллы, либо падать по деньгам. Первое делать некогда, а второе ой как не хочется.
-кум
Ребята, как можно НИХУЯ не зная, лутать бабки в секторе, где идёт постоянная работа с данными? Я бы понял, если бы речь шла о том, что очередного богатого сынка посадили в кресло, где он ответственен за смену куллера в офисе, и получает за это полляма. А тут это как возможно?
Ты из 1С?
Почему нихуя не зная? Норм волки учатся сперва, менторы их натаскивают реальными задачами. Учатся 700-1000 часов. Потом только вкатываются.
Нет. В сбере работал с гринпламом, потом в мелкой компании с ним же и сейчас в 3й конторке делаю двх на постгре.
Писпарк, аирфлоу, яндекс облако, все на дбт перевожу. Грузим данные через апихи, 1с и из с3. Стандартный набор мелкой компании.
От 1с блевать тянет, все что с ней связанно отдаю на подчиненных, первые 2 месяца работы даже не получал доступы в нее, вот такой я тимлид. От конструкций типа ЕстьNULL глаза вытекают, говно блять
Лол, т.е. это те, кто умеет работать в реал тайме, а не нулевой хуй? В таком случае, они даже полезней нулевых выпускников с корочкой, которые 5 лет изучали устаревшее на десятилетия говно.
Тогда, может и мне попытаться вкатиться таким методом...
А, ну и вкатуны с выдуманным опытом, конечно же. Большая часть отсекается ещё на этапах скрининга резюме и опроса HR, но некоторые, таки, проскакивают, и мы потом ловим фейспалмы на тех собесе.
> Что думаете про вкат в Data Engineer?
Глупо. Ибо это супер нишевая сфера, где нужны специалисты в одной отрасли -- ИИ.
Тебе как 29лвл рнн господину, причем с шизой, надо выбирать практичные профессии, которые позволяют в одного делать продукты.
В команду ты не вкатишься, не мечтай, да и если вкатишься, то быстро рыганешь, ибо к 29 годам ты не научился самому главному навыку в жизни, к ответственности. Я по себе знаю, я тоже рнн господин, имею довольно разноплановые скиллы, которые легко монетизировать в области дижитал и айти. Но я банально затягиваю ВСЕ заказы из-за того, что мне банально незачем работать и работа мне в тягость.
Для себя нашел другой выход из такой хуевой ситуации, я делаю продукт. Скомпилировал все свои навыки в одном конкретном продукте и выходит хорошо. Если санкции снимут, то думаю свои 10к баксов в месяц буду лутать на одном этом продукте.
А дата инженер литерали ху. Ну собирешь массив данных и чего? Будешь надеяться, что он кому-то там нужен, сидеть блять по всему интернету искать на говнофорумах сливы, в попытках собрать данные сам наследил в интернетах по чем зря.
Короче мне как инди разработчику непонятна конечная цель навыков сбора данных. Учиться этому целенаправленно не вижу смысла, ведь когда собирал данные про сферу в которую я нацелился, я сделал это довольно быстро с нулевыми знания специальными.
Короче, хуй его знает. Возможно я лягушенок на дне колодца. Но чет как мне кажется даже создатель глаза бога остался в пределах успеха простого инди разработчика. И с учётом сферы глаза бога наоборот зашкварился об спецслужбы разных стран.
С 10 годами опыта ищу работу уже 5 месяцев. Даже если делают офер то потом узнают что работал по ИП и шлют лесом.
ПИтон сейчас перегретей даже чем фронтенд. Но именно бекенд, про МЛ и дата инженеров не в курсе.
>цель навыков сбора данных
потому что ты долбоёб, конечно тебе нихуя не понятно
гугли одно - data driven, дальше сам разберёшься, может аналитиком данных станешь когда твоё говно не выстрелит
ГАНДОН
>Смотрю в своей мухосрани он идет топ 2 по кол-ву вакух
вакансии могут месяцами висеть, многие вакансии на которые я еще в Январе проходил собесы до сих пор открыты.
> двх на постгре.
Да ты ебанулся
кстати да, ты там вообще уебался?
pg это же heap таблицы, или там данных совсем мало?
> Глупо. Ибо это супер нишевая сфера, где нужны специалисты в одной отрасли -- ИИ.
Диванный такой диванный
В целом да, я против такого, но тут столько пиздеца от подрядчиков которые высрали это решение, что я первую неделю работы я ускорил загрузку данных в 4 раза. А потом ускорил обработку еще в 2 раза. Тут пиздец, но и данных мало.
Сейчас данные из ms sql забираю. Там коннектор 1с написан так, что забивает всю строку пробелами до ее макс значений. Типа строка на 1000 символов, сама строка в 1с пустая, а нам приходит не null, а 1000 пробелов ебаных. Юиды хранятся так же в виде строки и с учетом пробелов и потому поле не сконвертить в юид. Этот пиздец исправлять еще очень долго и пока в саму постгрю я не скоро уткнусь. А как только она станет проблемой, то благодаря DBT переезд на новую базу будет просто заменой конфига в подключении.
> А как только она станет проблемой, то благодаря DBT переезд на новую базу будет просто заменой конфига в подключении.
Да хуй там плавал. Даже с DBT ты говна поешь знатно, спотыкаясь на куче мелких подводных камней даже если ты просто с Постгреса на ГП поедешь. А уж если тебя угораздит поехать на Кликхаус, например, то будете сидеть модели переписывать.
С гринплама на постгрю я уже переезжал на прошлом месте, на новом не пробовал.
На клик не планирую переезжать, но смотрю вариант поднять его как сервис, загрузить все данные жирные инкрементально, построить витрины и высрать агрегированный инкремент в основную базу - норм тема. После расчетов тушить базу, так как после постройки она нахуй не нужна. Все витрины сейчас строятся за час. У меня еще есть запас в 3-4 часа, прежде чем начну упираться в потолок производительности. Потом в яндексе докину ресурсов и буду планировать переезд в другую базу.
Проблемы надо решать по мере их поступления, а не просто чтобы было заебаться и перелопачивать все имея по итогу нихуя. Просят результат - даем им результат, постепенно наполняя базу сущностями.
А еще всегда есть вариант уволиться и забить хуй, как поступали ебаные вендоры в этой компании, понимая что тут полный пиздец.
Ебать порвало дата программистов. Парнесы писать учат еще в школе, а поиск по базе и рисовать графики умеет даже веб-макака.
На счет ИИ это была даже лесть, но двузначное айсикью не смогла в аналитику текста.
Выпиздим из моего поста массивы для нейросетей, и вы нахуй никому не врались. Будете блять парсить двачи и комменты на твиче. Других задач увы нет.
Молодо, зелено
ИЗУЧАЙ КАКИЕ РАБОТЫ НУЖНЫ БУДУТ В БЛИЖАЙШЕМ БУДУЩЕМ. ВСЁ ЧТО СВЯЗАНО С ТВОРЧЕСТВОМ- СОЙДЕТ НА НЕТ. И.И. БУДЕТ ВСЁ ГЕНЕРИТЬ В 100 РАЗ ЛУЧШЕ ЛЮБОГО ПИСАТЕЛЯ ХУДОЖНИКА ПЕВЦА. ХЗ. В РОБОТОСТРОЕНИЕ ИДИ. БОЛЬШИНСТВО СТАНУТ ДВОРНИКАМИ ГРУЗЧИКАМИ РАЗНОРАБОЧИМИ ДОСТАВЩИКАМИ ЕДЫ. ДАЛЬНОБОЙЩИКАМИ. ПОТОМУ ЧТО ВСЮ ОФИСНУЮ ХУЕТУ БУДЕТ КОДИТЬ И.И. ПОСТЕПЕНО И.И. ЗАМЕНИТ ВСЕ ВИДЫ РАБОТ НО УЖЕ В ТО ВРЕМЯ БУДЕТ БОД МИНИМАЛЬНЫЙ ПРОЖИТОЧНЫЙ МИНИМУМ ЧТОБЫ СКОТЫ НЕ ДОХЛИ С ГОЛОДУ БЕЗ РАБОТЫ
Напоминаю, что самую топовую площадку для анализа даты со стима написал игрожурналист. Не веб-разработчик даже, а простой журналист.
> Проблемы надо решать по мере их поступления
Можно просто сразу не создавать себе проблем, чтоб не надо было потом их решать. Но я понял твой подход, надеюсь мы не пересечёмся.
Хахаха, вот так вот вам, релоканты тупые)
Великий Программист 1С-ник
>НО УЖЕ В ТО ВРЕМЯ БУДЕТ БОД МИНИМАЛЬНЫЙ ПРОЖИТОЧНЫЙ МИНИМУМ ЧТОБЫ СКОТЫ НЕ ДОХЛИ С ГОЛОДУ БЕЗ РАБОТЫ
В то время будет уже или гойда 3 мировая или корона 2.0
Не говори сколько ты получаешь за код на отечественном пхп, а то они в петлю прыгнут.
С двух работ ~500k/mon. В основном уделяю работе 5-6 часов 5/2. Иногда приходится потеть, но крайне редко. Обычно проёбываюсь как могу.
Но у девопсов всё равно круче. Там с 1 работы столько прилетает как нехуй. Только вот переучиваться уже лень в 36 лвл, так что похуй.
Ну давай, посиди еще пол года просто сжирая бюджет команды, чтобы похоронить результат работы подрядчиков и остаться на том же месте где был, чтобы потом у тебя аналитики с нуля начинали все разрабатывать в базе. А сейчас база наполняется, на хранилище переезд есть и оно не помирает и не планирует помирать. В постгрю пишут и читают в разные периоды времени и она более чем стабильно переваривает все что ей скармливают. Сейчас даже писпарковый кластер сильнее загружен, так как из 1с ебаная интеграция, которую тоже нужно передалать и в процессе этого.
Если ты такой умны, то где ты был в этой компании 2 года назад, когда все начиналось? Есть легаси и с ним надо жить, искать и планировать пути развития, а не дуть губки и говорить что ой, эта база плохая, надо сразу в жир уходить. Перезд с текущей постгри и текущим дбт на гринплам уйдет просто через изменение профайла дбт. Осталось только легаси подрядчика переписать с их ебаной инкрементальной загрузкой и будет адекватное хранилище.
Ты идиот? Зачем ты общаешься сам с собой на анонимном форуме??
Да в целом смысла мало, особенно с далбоебами сидящими в айти смысла мало общаться. Все как на подбор ебанаты. Потом и не общаюсь с этими клоунами кроме как на работе и не завожу с ними знакомства. Самые скучные люди в айтишке сидят.
3ЕЙ МИРОВОЙ НИКОГДА НЕ БУДЕТ МЕЖДУ ЛЮДЬМИ.
ДЕРЬМОНЫ 2.0 ТОЖЕ НЕ БУДЕТ. СПЕКТАКЛЬ НЕЗАЧЕМ ПОВТОРЯТЬ ДВАЖДЫ
А БУДЕТ ПИЗДА МАГНИТОСФЕРЕ И СМЕНА ПОЛЮСОВ К 2035 С ВЕРОЯТНОСТЬЮ 99%
А я ищор не сплю. Всё думаю 1с или девопс.
Девопс, выкатывайся
Щас нехватка лютая спецов, там конечно много дрочева, но на топ позициях есть вилки до 700к без менеджерских задач
А я тоже хотел устроиться QA, чтобы немного заработать, но потом чот подумал, что это надо будет в одно и то же время вставать, созвоны эти, плюс собеседования проходить. В общем я решил лучше стартап пилить, чем пытаться устроиться. Так я могу в своё удобное время заниматься.
Я до этого создавал свои продукты, так что я не с нуля.
>Для себя нашел другой выход из такой хуевой ситуации, я делаю продукт. Скомпилировал все свои навыки в одном конкретном продукте и выходит хорошо
молодца
Ну я сорт оф дата инженер.
Подразумивается, что должен быть сконцентрирован на дата процессинге.
По факту - один фиг пилишь всё от ETL до API для фронта.
Должна быть разница с обычным бекендером, но я её не чутсвую.
Ну разве что ожидается что дата-инженер спарк знает. Всё.
Ты просто ебло, даже не представляешь насколько 1с огромна и сколько там продуктов, есть даже конфигурация для твоей сраки, называется 1С:ОчкоПетуха. Бухгалтерия это только процентов 20 из 1С.
мимо_Нуралиев
МОЧА ЦП! СНОСИ ТРЕД
Ты ёбаный клоун, какая тебе иммиграция, какая удалёнка наху? Твой максимум - курьер, туда быстрый вкат и можешь прямо на самокате на хуй в Ереван катиться.
чел, ты плохо делаешь, чтор пишешь гадости
Тебя примут, посадят на испытательный срок, ты скажешь:
>Му хрю пук сложнааа рррЯЯя пидарахи
И свалишь в туман. Не лезь в 1С, не лезь в ИТ, ты не сможешь.
Чел, с недоумками только так и следует общаться, чел.
надо подбадривать, чтобы на этом сайте была хорошая атмосфера
> Ну если верить Илье Мэддисону, то он стал успешен в своё время, потому что не было конкуренции. Поэтому он советует идти туда, где они низкая. В случае с айти это конечно же 1С.
Или он, или ты, что-то неправильно поняли.
Жопич стал популярным (лет 15 назад) и правда, потому-то не было конкуренции. Но почему её не было?
Интернет не воспринимали всерьёз. Ютуб не воспринимали всерьёз. Это была абсолютно новая ниша, где популярным становился ЛЮБОЙ кал.
С 1с всё абсолютно иначе. Все прекрасно знают, что это такое, и поэтому не идут. Если ты вкатываешься в 1с - ты там и останешься.
Похожая ситуация и с SAP.
>Data Engineer
>29 лвл
Я вот пока начал проходить курс https://www.youtube.com/playlist?list=PLLxnyHENCxBBPQHlKvj_fMY5EOtyd5570
Пайтон и основы SQL уже знаю, так что быстро половину проскачу. А вот остальное пока тёмный лес для меня. Какие-то Airflow, Pandas, HADOOP, Spark и тд. Хотя тут нет хадупа и спарка, но это типа База?
29 лвл тнн рнн сыч лист шыз