🌐 Twitter показал свой код 🐍  

Вчера компания опубликовала на GitHub часть исходного кода, который отвечает за рекомендательные алгоритмы – 2 репозитория: the-algoritm и the-algoritm-ml (этот полностью Python), а также инструкцию (твиттер, нужен VPN) по работе с ним.

🔀В инструкции описывается конвейер рекомендаций, который выполняется примерно пять миллиардов раз в день.

💬 «Мы пытаемся извлечь 1500 лучших твитов из пула сотен миллионов… Сегодня хронология ленты «Для вас» состоит в среднем из 50% (твитов от пользователей, на которых вы не подписаны) и 50% (твитов от пользователей, на которых вы подписаны). Хотя это может варьироваться от пользователя к пользователю».

«Рейтинг твитов достигается с помощью нейронной сети с ~48 млн параметров, которая постоянно обучается взаимодействию с твитами, чтобы оптимизировать положительное взаимодействие, например, лайки, ретвиты и ответы» 💭

👀Кто не в курсе, это часть инициативы Илона Маска по повышению прозрачности компании, т.к. рекомендательные алгоритмы использовались предыдущими владельцами для цензуры и продвижения радикально-левых политических взглядов.

Да и просто изучить код на Python, который используется в проде крупной компании весьма интересно 🤔