Только что я внимательно обсудил с Gemini pro 3.1 и понял, что сейчас мы можем использовать всего одну высокопроизводительную видеокарту для токенизации прошлых 500 свечей и рыночных данных, накопленных за это время… После токенизации это означает, что вы можете обучить на своем компьютере простую большую модель, похожую по производительности на GPT-2, но сосредоточенную только на анализе цен и вероятностей. За короткие 2-3 года стоимость обучения больших моделей, похоже, снижается не за счет развития аппаратного обеспечения, а благодаря появлению новых алгоритмов. Моя текущая идея — попробовать обучить простую мультимодальную модель, где данные о ценах и ордерах упрощены до 8 токенов, объем торгов — до 2 токенов, а новости, связанные с конкретной свечой, — до информации о наличии бычьего или медвежьего сигнала… Такая модель сможет захватывать большинство паттернов, используя всего 2-4 слоя трансформеров и 128 скрытых измерений… Мне кажется, эта идея очень интересна, она гораздо увлекательнее, чем просто заставлять ИИ писать стратегии для квантового трейдинга!