.... Про возможность создания подобного сервиса, года 4-5 назад, отправлял вам вопрос. Вы коротко, иронично ответили: - зачем? Ведь есть Яндекс и Гугл))).
тут еще надо учитывать обратное влияние на рынок компаний, которые будут получать эти данные и будут предпринимать какие то действия, которые будут нарушать полученные ранее данные и так по кругу
Ога, уже несколько роликов втирает нам про свои миллионные прибыли а собрать небольшой продакшн для роликов и видеомонтажа не может. Спустя несколько лет таких рассказов, дождались нормальной превьюшки. ))
Особенно когда говорит: та на это нужно всего три человека, и через минуту уже рассуждает о крупной компании - да они могут выделить кучу людей, но на кой эти затраты нужны... Так таки 3 человека, или кучу людей нужно чтоб запилить проект? В общем история перспективы успешного успеха понятна.
Да, интересно что такие костыли выростают до таких обортов, это к тому что как со сквозной аналитикой мп. Маркет плейс за день может развернуть всю свою аналитику и прибить рынок сторонних сервисов. Так и тут у Яндекса все это под капотом есть, то же видимо скоро для брендов сделает.
Что может быть проще, чем спарсить фейсбук) час работы максимум... твиттер так вообще халява. А контакт просто на сдачу. Что-то можно и через апи, конечно, но вряд ли везде. Ашманов чем-то подобным занимается, он в каких-то из интервью говорил, сколько всего они за день парсят. У них это называется "управление репутацией". Это миллионы и миллионы данных в день. Под это дело надо десятки, а то и сотни тысяч аккаунтов. Тысячи проксей. Куки, сессии, и вот это вот всё. Это ещё не храним и запросы не делаем. И десяток тесл А100 до кучи, для начала.
Практически реинкарнация нашего Яндекс.Советника спустя 10 лет :) Макс, когда дойдете до этапа метчинга товаров между площадками - напиши мне, у нас лучшая ML команда по метчингу товаров, и не только в РФ. 🕶
@@kirillvlasov1131 в том то и дело что глаз бога оперирует не только отрытыми источниками, но и базами типа ментовских и страховых - дает адреса, телефоны и тд, т.е. там по сути торговля приватными данными идет.
@@MaximKulgin если вы заходите на сайт без входа в учетную запись, то вам твиттер не покажет все твиты интересующего вас аккаунта. Что-то останется закрытым. Т.е. не получится парсить актуальную информацию без учетки.
.... Про возможность создания подобного сервиса, года 4-5 назад, отправлял вам вопрос. Вы коротко, иронично ответили: - зачем? Ведь есть Яндекс и Гугл))).
У Интерфакса уже тогда был скан.
У Интерфакса уже тогда был скан.
обложка играет роль 100%, быстрее замечаю ваши ролики. бабки потрачены не зря! Ролик не смотрел, зашел коммент написать :)
Спасибо 😉
полностью противоположная ситуация... превью отталкивает, ролик зашел
@@maximsheleh9603 а почему? Поделитесь, пожалуйста! Очень нужно мнение
тут еще надо учитывать обратное влияние на рынок компаний, которые будут получать эти данные и будут предпринимать какие то действия, которые будут нарушать полученные ранее данные и так по кругу
Интересное видео, но можно HDR отключить? Яркость глаза режет.
ок
Ура, снова про BA. Почему-то каждый раз радуюсь)
ВА?
@@MaximKulgin ну, brand analytics
Хех, я там работаю) Все на самом деле не все так просто. Архитектурный план гораздо глубже.
конечно не просто. я даже сказал бы - сложно. крутые ребята
Обложка топ😮
спасибо
Ога, уже несколько роликов втирает нам про свои миллионные прибыли а собрать небольшой продакшн для роликов и видеомонтажа не может. Спустя несколько лет таких рассказов, дождались нормальной превьюшки. ))
@@chukgeck07 за красивой картинкой вам к трансформаторам
Как будто поговорил с наставником по бизнесу, спасибо.
Спасибо
Капец там серверов надо
от ролика к роли ставки повышаются)) ждем "1 триллион в год на парсинге лендингов )))"
Продвигать такой проект можно только путем оптимизации тематических страниц по ключевым запросам. создавая кластеризацию.
да
Про маркетинг подобного сервиса интересно было бы послушать
пока идей нет
Особенно когда говорит: та на это нужно всего три человека, и через минуту уже рассуждает о крупной компании - да они могут выделить кучу людей, но на кой эти затраты нужны... Так таки 3 человека, или кучу людей нужно чтоб запилить проект? В общем история перспективы успешного успеха понятна.
Да, интересно что такие костыли выростают до таких обортов, это к тому что как со сквозной аналитикой мп. Маркет плейс за день может развернуть всю свою аналитику и прибить рынок сторонних сервисов. Так и тут у Яндекса все это под капотом есть, то же видимо скоро для брендов сделает.
100%
а Telegram API дают на каналах? для парсинга, я что-то не понимаю может
Что может быть проще, чем спарсить фейсбук) час работы максимум... твиттер так вообще халява. А контакт просто на сдачу. Что-то можно и через апи, конечно, но вряд ли везде. Ашманов чем-то подобным занимается, он в каких-то из интервью говорил, сколько всего они за день парсят. У них это называется "управление репутацией". Это миллионы и миллионы данных в день. Под это дело надо десятки, а то и сотни тысяч аккаунтов. Тысячи проксей. Куки, сессии, и вот это вот всё. Это ещё не храним и запросы не делаем. И десяток тесл А100 до кучи, для начала.
1000 антидетект аккаунтов. Легко.
@@gontnetwork8851а сто тысяч?
Практически реинкарнация нашего Яндекс.Советника спустя 10 лет :)
Макс, когда дойдете до этапа метчинга товаров между площадками - напиши мне, у нас лучшая ML команда по метчингу товаров, и не только в РФ. 🕶
Ок !
Твиттер через Selenium парсил недавно.
а так вот кто виноват в блокировке )))
Медиалогия же лет 15 назад такой сервис еще сделала.
На хостинг будет просто уйма денег уходить. На этот бесконечный парсинг
100%
4:27 Вопрос в другом зачем им это нужно?
Да, есть система аваланче. Который занимается Андрей Масалович
Когнитивный диссонанс большая богатая фирма где работают тысячи лучших программистов закажет у маленькой команды студентов и самоучек😂
Смешно ага :)
Вполне реально.
Всё решаемо.
Делали такой сервис ещё в 2018-2019 году
Закрыли?
@@MaximKulgin piiq media, у них несколько продуктов, этот PIIQ Intel.
Кэмбридж аналитик слышали про такую компанию
твитер даёт API для парсинга
с ограничением количества запросов?
Язык жестов конечно... 😑
Глаз Бога сделайте для би ту би. Я готов платить 20-30к в год.
А расскажите детали - что это такое ? Как должно работать ?
@@MaximKulgin глаз бога дает инфу по людям, кучу личных данных. это не законно.
@@yalmemeверно, не законно. Но не ясно почему? - т к все берется из открытых источников
@@kirillvlasov1131 в том то и дело что глаз бога оперирует не только отрытыми источниками, но и базами типа ментовских и страховых - дает адреса, телефоны и тд, т.е. там по сути торговля приватными данными идет.
@@kirillvlasov1131 потому что как только ты начинаешь нагибать систему, система реагирует и нагибает тебя
И да у гугла есть агенты просто менеджеры нефтяных очень ленивые не изучают гугл😅
Не все СМИ выдаются в Google News, часть заблокированы.
Могу сказать что ChatGPT более грамотно работает с "парсингом" открытых данных )
для этой задачи нужен 1 человек, который программирует на гпт чате
а как же тогда бабло отжимать у клиентов? Надо же им по ушам проехать , что сотни программистов работают и тысячи серверов ))))
парсить регулярно твиттер практически нереально. аккаунты, через которых будет идти парсинг, будут быстро баниться.
там открытые данные же
@@MaximKulgin если вы заходите на сайт без входа в учетную запись, то вам твиттер не покажет все твиты интересующего вас аккаунта. Что-то останется закрытым. Т.е. не получится парсить актуальную информацию без учетки.
@@bramduss ну, у твиттера так-то есть апишка если мне память не изменяет.
@@bramduss да откуда им знать, теоретикам )))