Пример из нашей жизни: постоянно переобучается классификатор текста. Объем модели 1,9 гигов и растет. Переобучается три-четыре раза в сутки примерно час на машине с 4гигами и всеми данными на винте. Задача обуславливается большим объемом текста и рубрик. Эта же машина делает предикты. Задача применить ваши методы и использовать спотовое обучение мощным инстансом на час несколько раз в день и предикты слабым инстансом в течение дня. Как это сделать не гоняя базу с инстанса на инстанс? Ведь даже если вынести данные на отдельный SQL инстанс, то для обучения модель все равно физически окажется на другом инстансе, а это потянет всю ту же перегонку данных взад-вперед и возврат модели на слабый инстанс. Перегонка туда-сюда данных\модели убивает все плюшки от раздельных вычислений. Поправьте пожалуйста где я не прав и что упускаю из виду.
Буду очень признателен, если бы Вы смогли рассказать как можно натренировать модель где-то (как Вы указываете на спотах), а потом использовать слабенький локальный сервачок для предикта не гоняя по сети гигабайты трафика взяд-вперед, что обычно занимает между серваками крайне большое время.
А сейчас как-то по-другому в плане трат? Я к тому, что 90% населения не в состоянии что-либо накопить. Рынок потреб.кредитования в 6,6 триллионов рублей этому подтверждение.
Если внимательно посмотреть на инпуты модели, то там ничего нет кроме слоев уровня, ни врагов, ни монеток, ни блоков с секретами, ни обработки этих секретов, ни поиска секретных труб, а в гонке уход с трассы не отменяет фитнесс модели. То есть по сути модель не «видит» нифига кроме трассы и блоков, которые ее окружают и ее прогресс обучения не зависит от правильности прохождения трассы. А собственно фитнесс модели не учитывает ничего, кроме дистанции и времени.
Поэтому результаты обучения ничтожны. Как выше написал grokinn — это брутфорс. А раз брутфорс то модель не применима на других уровнях и не применима при рандоме врагов/секретов/машин и трасс.
Поэтому ценность полученных данных имеется только в виде нахождения идеальной траектории для одной конкретной локации и для неизменных параметров.
Ценность этих данных в других местах нулевая. На другом уровне модель опять упрется в стену и будет там торчать, как и на Марио Карте в трубу.
Вообще странно, что этот разработчик упорно игнорит эти вещи в своих видео и говорит о том, как марио «очень любит эту трубу».
Этот метод открывает большой горизонт для фантазии, где limit f(x) будет полный аутсорс продаж на вашу рекламную систему, с колл центром, продажниками и % с продаж.
Для того, чтобы скрипт определил именно профиль вконтакте, Вы должны дать этому скрипту (приложению) разрешение на доступ к своим данным. Но очевидно, что Вы этого не делаете. Достигается это разными хитрыми способами. Просто от захода никто профиль видеть не может.
Спасибо большое за ликбез. Хотя сути заголовка этой статьи это не меняет, а наоборот подтверждает.
И факт передачи этой информации о посещениях веб-страниц конкретным человеком третьим лицам… без согласия самого посетителя будет нарушением закона...
Я не давал socfishing.ru разрешение на сбор данной информации.
Понимаете, я давал вконтакте разрешение на публикацию моей информации. Но я не давал разрешение ее воровать у вконтакте, я не давал разрешение сопоставлять мои публичные данные через куки, я не давал разрешения авторизовываться на сайте через подложные невидимые кнопки авторизации и пр.
То есть если мой профиль стал по каким-то причинам доступным socfishing.ru это не дает им право рассказывать всем подряд о моих перемещениях и более того получать за это деньги.
Вы аппелируете к вконтакте вроде как я отдал им инфу о себе, то эта информация является общедоступной. Я согласен можно зайти на мой профиль, прочитать обо мне. Но извините, не взлом моего браузера и эксплуатация уязвимости вконтакте, а как следствие продажа данных о моих перемещениях.
Попробую перевести на простой язык. Я говорю, что согласен с Вами, что посмотреть мой паспорт турагент может, но он не может наклеивать мне на джинсы поисковый маячок, треккать мой чип в биометрическом паспорте, а так же налево и направо продавать данные о моем местонахождении. Да, я дал разрешение посмотреть и записать данные моего паспорта, но более ни на что.
Вы же в данном случае говорите, что турагент имел право посмотреть паспорт, а то что он за мной стал следить и продавать данные это уже вроде как просто некрасиво, но не наказуемо, типа сам дурак, что отдал паспорт.
Так я об этом и говорю. То есть государство заявляет, и Вы это подтверждаете, что любые данные которые мы передаем в социалки они становятся доступными не только друзьям, но так же и рекламным сетям, собирающего данные путем эксплуатирования уязвимостей в программных продуктах, например тот же кликджеккинг. А потом продающие их за деньги.
Прям электронный гопстоп: «Мы ниуиноуатые, сам всио отдал».
Вы только, что очень грамотно объяснили название поста. А так же и последствия этого для любого сбора любых данных для любого использования, если только это не пароли.
По факту любой теперь может снять любые ваши данные любым вирусным способом и использовать их по любому назначению.
Многие уже протестили, на хабре и гиктаймс появляются, надо опросить.
Поэтому результаты обучения ничтожны. Как выше написал grokinn — это брутфорс. А раз брутфорс то модель не применима на других уровнях и не применима при рандоме врагов/секретов/машин и трасс.
Поэтому ценность полученных данных имеется только в виде нахождения идеальной траектории для одной конкретной локации и для неизменных параметров.
Ценность этих данных в других местах нулевая. На другом уровне модель опять упрется в стену и будет там торчать, как и на Марио Карте в трубу.
Вообще странно, что этот разработчик упорно игнорит эти вещи в своих видео и говорит о том, как марио «очень любит эту трубу».
Я не давал socfishing.ru разрешение на сбор данной информации.
Понимаете, я давал вконтакте разрешение на публикацию моей информации. Но я не давал разрешение ее воровать у вконтакте, я не давал разрешение сопоставлять мои публичные данные через куки, я не давал разрешения авторизовываться на сайте через подложные невидимые кнопки авторизации и пр.
То есть если мой профиль стал по каким-то причинам доступным socfishing.ru это не дает им право рассказывать всем подряд о моих перемещениях и более того получать за это деньги.
Вы аппелируете к вконтакте вроде как я отдал им инфу о себе, то эта информация является общедоступной. Я согласен можно зайти на мой профиль, прочитать обо мне. Но извините, не взлом моего браузера и эксплуатация уязвимости вконтакте, а как следствие продажа данных о моих перемещениях.
Попробую перевести на простой язык. Я говорю, что согласен с Вами, что посмотреть мой паспорт турагент может, но он не может наклеивать мне на джинсы поисковый маячок, треккать мой чип в биометрическом паспорте, а так же налево и направо продавать данные о моем местонахождении. Да, я дал разрешение посмотреть и записать данные моего паспорта, но более ни на что.
Вы же в данном случае говорите, что турагент имел право посмотреть паспорт, а то что он за мной стал следить и продавать данные это уже вроде как просто некрасиво, но не наказуемо, типа сам дурак, что отдал паспорт.
Я утрирую пример, но думаю Вам понятен смысл.
Прям электронный гопстоп: «Мы ниуиноуатые, сам всио отдал».
По факту любой теперь может снять любые ваши данные любым вирусным способом и использовать их по любому назначению.
Ведь он не нарушит фактически ничего.