Добавлена поддержка ЭЧ/Ech (ex-Escapechan) и Ежчана (ejchan.net, ejchan.site). Набегаем, тестируем архивацию, сообщаем о замеченных проблемах.
К сожалению, значительная часть сохранённых до 2024 г. изображений и видео была потеряна (подробности случившегося). Мы призываем всех неравнодушных помочь нам с восстановлением утраченного контента!

Статистика и машинное обучение

 Аноним 12/11/16 Суб 14:55:24 #1 №2126 
tumblrinlinemk0otbdnr41qz4rgp.gif
Этот тред не для петушков из ШАДа /pr, а для серьезных людей и сочувствующих.

Здесь мы переобучаемся, оптимизируем негладкие функционалы, выбираем из двух стульев по Байесу, голосуем за Ланжевена против Гамильтона, ходим в китайские рестораны по олимпиадным талонам для столовой ГЗ и гоняем AIXI на Ломоносове.
Аноним 13/11/16 Вск 01:33:40 #2 №2238 
Тау, и где все?
Аноним 13/11/16 Вск 02:11:51 #3 №2242 
>>2238
Первокультурная доска просто. Статистику либо не знают, либо презирают, либо всё вместе.
Аноним 13/11/16 Вск 02:30:29 #4 №2244 
>>2242
Ну теорию вероятности уже начали учить - пора и за статистику браться!
Аноним 14/11/16 Пнд 16:24:51 #5 №2603 
stackmorelayers.jpg
Ну что вы, бетмены?
Аноним 14/11/16 Пнд 21:08:25 #6 №2639 
>>2603
Проиграл.
Аноним 16/11/16 Срд 12:30:35 #7 №2926 
>>2603
А чего обсуждать то? Вот читаю Вапника, наконец-то все это машинное обучение приобрело для меня хоть какой-то смысл.
Аноним 16/11/16 Срд 14:42:06 #8 №2961 
>>2926
Молодец, в верном направлении движешься.
Потом можешь переходить к PAC и PAC-байесовским оценкам.
С Вапником проблема в том, что его теория мало что может предложить для сложных моделей вроде тех же нейросетей (с бесконечной VC-размерностью).
Аноним 16/11/16 Срд 14:46:56 #9 №2966 
>>2961
>вроде тех же нейросетей (с бесконечной VC-размерностью).
Где ты видел нейросеть с бесконечной VC-размерностью?
Аноним 16/11/16 Срд 16:31:08 #10 №3010 
>>2926
Какую именно книгу?
Аноним 16/11/16 Срд 16:53:39 #11 №3024 
>>2966
Да, я обосрался, для обычных перцептронов она конечная, но все равно размерность большая (квадратично зависит от числа весов), поэтому VC-оценки не особо применимы на практике.
Аноним 16/11/16 Срд 22:33:59 #12 №3083 
>>3010
Statistical Learning Theory
Аноним 16/11/16 Срд 22:48:00 #13 №3086 
О, хороший тред. Интересует машинное обучение, подскажите как мне быть. Куда идти после школы?
Сам читаю сицп + Basic- Math (Serge Lang), потом выучу нормальный язык и примусь за алгоритмы кормена + дискретку, потом машинное обучение. В правильном направлении двигаюсь?
Аноним 17/11/16 Чтв 00:15:04 #14 №3093 
>>3086
SICP не нужен, учи сейчас какой-нибудь язык и уже сейчас читай про алгоритмы.
Аноним 17/11/16 Чтв 00:30:59 #15 №3097 
>>3093
>sicp не нужен
А мне нравится сильно, не когда бы не подумал что столько классных решений проблем можно придумать используя простой синтаксис. Все таки дочитаю до конца.
Аноним 17/11/16 Чтв 14:42:44 #16 №3127 
>>3097
ну это хорошая книжка, но не принципиальная.
Аноним 18/11/16 Птн 00:33:36 #17 №3237 
Screen Shot 2016-08-11 at 01.03.27.png
Мои мысли - мои скакуны. По порядку, без математической строгости:

1. Впервые взялся за написание рекомендательной системы. Какие я вижу трудности впереди? Со всеми пользователями не сравнишься, надо делать кластеризацию, чтобы рекомендации прилетали только из ближайших для юзера кластеров. Вообще тут веет асинхронными ветрами Scala/Spark: batching, streaming, persistent data structures.

2. Продолжая тему маркетинга - прочел статью про bayesian bandits, может дойдет дело до применения заместо A/B тестирования.

3. Последние 2 года постоянно подтягиваю то алгебру(по Кострикину и листкам) то тервер с матстатом(Чернова, Райгородский).

4. Посматриваю в сторону gtx 1080 на замену gtx 960, с которой успел погастролировать на 2 работах (Deep Learning 4 NLP). Чувствую, она быстро окупится.
Аноним 18/11/16 Птн 01:56:48 #18 №3244 
>>3086
В долгосрочной перспективе будет лучше, если ты просто хорошо выучишь линал, матан, тервер, матстат, оптимизацию - вот такие примерно вещи.
В машинном обучении SICP пригодится с очень маленькой вероятностью.
Придется мимикрировать под питоно-питуха и обмазываться tensorflow.
Хотя некоторые вещи из дискретной математики вполне могут пригодиться.
Аноним 18/11/16 Птн 01:59:08 #19 №3245 
>>3237
Все хорошо, но давайте с вашими ветрами все-таки в /pr.

По существу: если ты делаешь SVD, то в определенном смысле ты уже кластеризуешь пользователей (даже какие-то статьи на эту тему есть). То есть, поверх этого, наверное, можно сделать некоторую кластеризацию, но не то что бы обязательно.

О бандитах давайте поговорим.
Аноним 18/11/16 Птн 18:10:49 #20 №3302 
>>3245
Не надо говорить о бандитах, это немцы в свое время вбросили, чтобы американцы и англичане мозги себе ломали, а не занимались решением действительно актуальных военных проблем.
Аноним 18/11/16 Птн 20:26:59 #21 №3309 
multiarmedbandit.jpg
>>3302
А как конкретно предполагалось применять бандитов на войне?
Аноним 18/11/16 Птн 20:28:14 #22 №3310 
illuarticlecontent.jpg
>>3302
Дмитрий Петрович, залогиньтесь.
Аноним 20/11/16 Вск 17:57:51 #23 №3522 
>>3302
Ой, дурак!
А труды Байеса и Бернулли только для бросания кубиков и монеток годятся?
Аноним 24/11/16 Чтв 18:43:54 #24 №3807 
Кто на НИПС едет, защеканы?
Аноним 26/11/16 Суб 15:58:55 #25 №3880 
Аноны, как найти вероятность (А и Б) или (А и В) или (Б и В)
Помогите
Аноним 27/11/16 Вск 02:20:06 #26 №3911 
>>3086
Да, только математику параллельно со всем, не стоит ждать пока выучишь всю нужную математику перед тем как программировать, тем более что в МО/ML будут всплывать темы наверняка, которых нет в базовых курсах.
Аноним 27/11/16 Вск 19:19:14 #27 №3943 
Аноны, какие предложите для начала книги по:
1. Теорверу
2. Матстату
?
Аноним 29/11/16 Втр 13:35:46 #28 №4133 
>>3943
наверни Феллера для начала
Аноним 01/12/16 Чтв 08:42:37 #29 №4329 
>>3943
А как у тебя с теорией меры?
Аноним 01/12/16 Чтв 16:28:52 #30 №4344 
>>4329
Судя по каггле, норм посоны-машинообучатели знают 3 вещи:
1. Лес это круто.
2. Сеточки это заебись.
3. Если почему-то пункты один и 2 не сработали, надо бустить.
Мера (вероятность)? Ну, это число от 0 до 1. Если много, радуешься. Если мало, растишь лес/обучаешь сеточку дальше.
Аноним 01/12/16 Чтв 22:20:21 #31 №4360 
>>4329
Да как-то плохо)
Аноним 02/12/16 Птн 03:15:26 #32 №4379 
Посоветуйте книжку по статистике, чтоб много примеров решения задач было, а то чет сухая теория не воспринимается
Аноним 02/12/16 Птн 10:21:55 #33 №4385 
>>4379
Заходишь на амазон, вбиваешь в поиске elementary statistics.
Аноним 02/12/16 Птн 15:44:19 #34 №4411 
>>4344
Ну привет, пришелей из 2013го. Вот вроде хотел подъебнуть, да только обосрался ты жиденько. На деле сейчас на каггле норм поцаны все знают уже давно, что первым нужно использовать xgboost, остальное по желанию, если в ансамблю добавть, чтобы результат на полпроцентика улучшить.
Аноним 03/12/16 Суб 12:10:45 #35 №4535 
Поясните за импульсные нейронные сети.
Аноним 03/12/16 Суб 16:02:34 #36 №4553 
Голодающий математик вкатился.
Что, можно на вашей ерунде бобосиков поднять?
Аноним 03/12/16 Суб 16:20:44 #37 №4556 
>>4553
Конечно, вон у нас тут был $3000000-в-секунду-кун
Аноним 03/12/16 Суб 17:32:47 #38 №4565 
>>4556
А фрилансом?
Аноним 05/12/16 Пнд 00:11:36 #39 №4694 
>>4553
>Голодающий математик
Думать надо было, прежде чем такую непопулярную профессию выбирать
Аноним 05/12/16 Пнд 18:37:03 #40 №4725 
>>4694
Ну математик на правах уберменша может перекатиться в любую плебейскую прикладнуху если захочет. Вот обратно конечно не так, плак-плак. Вот я и интересуюсь, как насчёт ваших этих обучений дело обстоит.
Аноним 09/12/16 Птн 12:10:01 #41 №5052 
>>4725
Можно зарабатывать очень прилично, но для этого, конечно, надо продемонстрировать некие результаты. Так что тут все зависит от тебя.
Правда вангую, что от рутинной хуйни, которую делает большинство дата-сатанистов, тебя довольно быстро начнет мутить. Поэтому лучше идти в ресерч.
Аноним 09/12/16 Птн 13:20:07 #42 №5058 
>>4725
Прикладнуха разная бывает. Зачем тебе, мамкину уберменшу, сантехника уровня import tensorflow as tf? Отрасти бороду да форкни какие-нибудь ML-проекты на гитхабе на предмет улучшения алгоритмов или даже запиливания своих идей на этот счет. Вкатишься в тусовку, а там глядишь в какой-нибудь гугл брейн возьмут.
Аноним 09/12/16 Птн 16:52:02 #43 №5067 
>>5058
Как только ты начинаешь "запиливать свои идеи на этот счет", это и есть ресерч. Но если заниматься им на нормальном уровне осознанности, то довольно быстро понимаешь, что это обезьянний подход - что-то там делать вместе со всеми остальными на гитхабе. Допускаю, что это может иметь достаточно высокий практически выхлоп, но мы ж тут все типа математики, нам же нужны красивые задачи.
Аноним 09/12/16 Птн 23:19:14 #44 №5087 
>>5067
>нам же нужны красивые задачи
сканави
Аноним 16/12/16 Птн 18:19:39 #45 №5437 
>>4725
Ну так чего голодаешь до сих пор?
Аноним 16/12/16 Птн 18:24:34 #46 №5438 
https://youtu.be/b0WTyetuV6Y?t=2316
Аноним 16/12/16 Птн 19:09:34 #47 №5445 
>>5438
Так вот где население двоща обитает в реальности.
Аноним 19/12/16 Пнд 18:17:03 #48 №5742 
>>5437
Голодать полезно для организма.
Аноним 19/12/16 Пнд 19:33:32 #49 №5753 
>>5438
>>5445
А в чём смысл? Двачер говорит о том, что статистика не нужна?
Аноним 19/12/16 Пнд 20:06:54 #50 №5757 
>>5742
Печени это скажи, мамкин ньюэйджер.
Аноним 19/12/16 Пнд 20:46:58 #51 №5763 
>>5757
>>5757
>мамкин ньюэйджер.
Поясните за ньюэйджера, не могу найти на лурке пояснения
Аноним 19/12/16 Пнд 21:05:00 #52 №5767 
Может тут кто знает, какая кафедра на мехмате лучше всего подходит под это дело?>>2126 (OP)
Аноним 20/12/16 Втр 13:24:01 #53 №5834 
>>5763
Попробуй в следующий раз не на лурке искать.
https://ru.wikipedia.org/wiki/Нью_Эйдж
Аноним 22/12/16 Чтв 00:53:48 #54 №5988 
вот зычное выступление любоцкого про persistent homology

https://www.youtube.com/watch?v=1wtq5A7VMsA

у меня встал
Аноним 22/08/18 Срд 20:40:32 #55 №42351 
>>5988
классный видос
Аноним 23/08/18 Чтв 14:54:45 #56 №42363 
>>2126 (OP)
Зачем машоб нужен? Почему его так часто упоминают?
Аноним 27/04/19 Суб 14:04:47 #57 №52821 
Поднимаю трупик.
А по RL есть что-нибудь строго математическое почитать?
Аноним 29/04/19 Пнд 13:50:40 #58 №52917 
Кто может объяснить, почему считается что AI это обман?
Аноним 03/05/19 Птн 09:24:05 #59 №53078 
>>52917
Потому что на нем бабло делают. Нет обмана, если ты сам во всем разобрался и себе запилил AI, ты тогда понимаешь, как всё работает. Если ты пользователь AI, то конечно тебе коммерческий разработчик любую хуйню может говорить, что это "на самом деле интеллект! он думает!", лишь бы ты пользовался его сервисом.
Аноним 03/05/19 Птн 14:11:54 #60 №53081 
>>53078
Ну да, раньше ведь под ИИ совсем другое понимали, сильный
ИИ, а теперь понятия подменили, опустили так сказать планку и впаривают ИИ, который вовсе не тот самый ИИ.
Аноним 11/05/19 Суб 02:17:51 #61 №53254 
>>53081
Развитой социализм.
Аноним 11/05/19 Суб 23:37:02 #62 №53282 
>>2126 (OP)
Почему стастистики очень не любят всех этих машинно обучателей?
Аноним 23/05/19 Чтв 12:45:02 #63 №54770 
>>53282
Почему не любят? Я такого не наблюдал.
Аноним 30/05/19 Чтв 21:37:35 #64 №55039 
а есть ок онлайн курсы по оптимизации/дискретке, где нормально так разжевывают? Можно и даже желательно - в бурже. Спасибо.
Аноним 31/05/19 Птн 00:37:37 #65 №55051 
>>55039
есть хорошие лекции у MIT
Аноним 19/12/19 Чтв 21:28:46 #66 №63081 
>>4565
Дай телегу
Аноним 25/12/19 Срд 10:51:12 #67 №63215 
>>2126 (OP)
блин а я только хотел дочитать про аль хоризми книгу и потом начать смотреть курсы шада, что бы вкатиться в яндекс помощником младшего джуниор старжера ручного тетсирования чистки унитаза в который ходят по малой и большой нужде настоящие программисты.
А оказывается шад почему то тут не любят.
Так а в чем с ним проблема?

Аноним 25/12/19 Срд 17:45:28 #68 №63241 
>>63215
При чём тут "проблема" или "не любят"? Просто это не по теме доски, с тем же успехом мы могли бы тут обсуждать авиаучилища или курсы сварщиков.
Аноним 05/01/20 Вск 18:30:05 #69 №63622 
Кто здесь?
Аноним 05/01/20 Вск 21:24:00 #70 №63632 
>>63631
Ну я пишу же, я думаю написано одно, а имеется ввиду количество.
Аноним 16/01/20 Чтв 12:32:46 #71 №64083 
>>63215
>>63241
Лол, шад по теме доски. Там готовят резёрчеров, а не скриптовиков. Уровень шада ~ИАД ФУПМа. ШАД -- это про опты и статистику, не про scikit-learn.
Аноним 16/01/20 Чтв 13:47:34 #72 №64085 
>>64083
>опыты
>статистика
>по теме доски
Аноним 16/01/20 Чтв 21:28:34 #73 №64098 
>>64083
Да ну, там прямо пхд по математике защищаются? Я не очень в кусе статистики, но после беглого взгляда на программу шада сложилось впечатление, что это что-то вроде профильного бакалавриата, только без общих предметов.
comments powered by Disqus