Меня зовут Кирилл Захаренко. Я создаю AI-first проекты — базы данных, которые используют нейросети (ChatGPT, Яндекс и другие).
Когда я начинал, мне казалось, что создать такой проект — это просто. Сделал структуру, добавил разметку, написал файл для нейросетей — и всё, счастье. Нейросети сами приводят трафик, а ты сидишь и собираешь партнерские ссылки.
Реальность оказалась совсем другой. Я прошел через блокировки хостинга, DDoS-атаки, падения серверов и ночи без сна. И сегодня я расскажу, с какими подводными камнями вы столкнетесь, если решите пойти по моему пути. Не как «теоретик», а как человек, который прошел через это лично и до сих пор держится на плаву.
Вы сделали русскую версию. Она работает, приносит трафик. Вы счастливы. И тут вы решаете: «А почему бы не выйти на весь мир?». Вы делаете английскую версию.
Что происходит дальше: Русскоязычный трафик — это теплая ванна. Мировой трафик — это смерч. Как только вы открываете английскую версию, на вас налетают глобальные AI-краулеры (Amazon, OpenAI, Perplexity). Они не читают по одной странице. Они выкачивают всё. И делают это с частотой, которая в разы превышает нагрузку от русскоязычной аудитории.
Вы выходите на десятки тысяч пользователей очень быстро. Нейросети подхватывают ваш контент. И тут начинается веселье.
Наивная мысль: «Я просто заблокирую ботов, и всё будет хорошо».Реальность: Боты не так просты. Они меняют IP-адреса при первой же блокировке. Вы баните один IP, а через секунду к вам стучатся с другого. И так по кругу. Ваша защита превращается в бесконечную игру в «кошки-мышки», где вы тратите ресурсы сервера на проверку всё новых и новых адресов.
Иллюзия: Вы проектируете базу, где пользователи сами обновляют данные. Первый зашел — обновил, остальные получили готовое. Гениально же?
Реальность: Первыми на вашу страницу приходят не люди. Приходят боты. И они приходят не по одному, а сотнями. Каждый из них хочет «обновить» страницу. Ваш сервер пытается обработать сотни одновременных запросов, которые вы не планировали. Он захлебывается. И вместо «умного обновления» вы получаете лежачий сайт.
Что происходит на деле: Вы думали, что пользователи будут «наполнять» базу. А на деле вы получаете бесконечную очередь из роботов, которые ломают вам сервер. И даже если вы поставите лимиты, боты будут обходить их, меняя IP.
Иллюзия: Вы настроили все для нейросетей. Думаете, они будут аккуратно брать данные по одной странице?
Реальность: AI-краулеры (Amazon, OpenAI, Perplexity) работают как пылесосы. Один такой бот за день сгенерировал мне сотни тысяч запросов. Он выкачивает ВСЁ. И ему плевать, что вы платите за сервер.
Что происходит на деле: Вы платите за трафик и ресурсы, а бот просто скачивает вашу базу. Он не оставляет вам ни клика, ни партнерской ссылки. Просто съедает сервер и уходит.
И снова про IP: Бот может использовать тысячи прокси-серверов. Если вы заблокировали один, он просто переключился на другой. Ваша защита должна быть умной, а не просто «блокировать по IP».
Иллюзия: В архитектуре таких проектов данные часто загружаются через внешний API. Вы один раз загружаете базу к себе, а потом работаете с ней локально, чтобы не дергать каждый раз чужие сервера. Всё надежно.
Реальность: Представьте, что на ваш сайт прилетает 100 ботов, и каждый делает по 100 запросов в секунду. Если у вас не настроены лимиты, ваш сервер пытается обработать всё это и начинает дергать внешний API. Владелец этого API видит лавину запросов (тысячи в секунду). Он решает, что это DDoS-атака, и блокирует вас.
Что происходит на деле: Ваш сайт превращается в пустую страницу. Вы не можете загрузить новые данные. Пользователи заходят — а там ничего нет. Вы теряете не сервер, а доступ к данным. И это гораздо страшнее.
Иллюзия: Вы берете тариф подороже, думаете: «Ну, теперь-то у меня ресурсы».
Реальность: Хостингу плевать на ваш тариф. Как только они видят «аномальный всплеск», они просто отключают вас, чтобы спасти остальных клиентов. Мне отрезали доступ из 60% стран мира, хотя нагрузка на сервер была всего 5%.
Что происходит на деле: Вы платите деньги, но при первом же чихе вас просто отключают. Вы остаетесь с носом, а хостинг говорит: «Мы так делаем ради безопасности».
Иллюзия: Многие думают: «Поставлю Cloudflare, он скроет мой IP, и боты меня не достанут».
Реальность: Cloudflare — это просто прослойка. Если ваш хостинг увидит, что через него идут аномальные запросы, он заблокирует сам Cloudflare. Ваш сайт умрет полностью. Это как легкая ширма от дождя: при сильном ливне её сдует ветром.
Что происходит на деле: Вы думаете, что защитились, а на деле вы просто поставили забор, который ваш хостинг сносит по своему желанию.
Иллюзия: Вы думаете, что если сделали все правильно, люди пойдут к вам, а нейросети будут цитировать?
Реальность: Трафик будет скакать. Днем — десятки тысяч, ночью — единицы. Вы не можете это контролировать. Вы просто сидите и смотрите на графики, надеясь, что сервер выдержит. Вы теряете сон. Вы сидите в 3 часа ночи и смотрите, не упал ли сервер.
Давайте я скажу вам страшную цифру. На наши проекты приходят под миллион запросов в короткий промежуток времени. Не сотни тысяч. Под миллион.
Если у вас слабое «железо» и нет защиты — ваш сервер умирает за 2 минуты. Он захлебывается, база данных встает в очередь, процессор загружается на 100%, и вы получаете письмо от хостинга: «Мы отключили вас за DDoS».
Чтобы выжить при такой нагрузке, вам нужны очень мощные ресурсы. Обычный тариф за 1000 рублей здесь не поможет. Вам нужны:
Такой сервер стоит от 15 000 до 30 000 рублей в месяц.
И это только начало.
Мне часто пишут: «Да что ты паришься? Купи нормальный выделенный сервер, настрой его, и никакие боты тебе не страшны».
Звучит логично. Но давайте посмотрим на реальную экономику.
Во-первых, штат. Это не просто «купил сервер и посадил». Это глубокая настройка:
Для этого нужен целый штат:
Итого, только на зарплаты уходит от 350 000 до 600 000 рублей в месяц. Плюс сервер (30 000), плюс налоги, плюс офис (если нужен), плюс бухгалтерия.
Во-вторых, пиковая нагрузка. Даже мощный сервер может дать трещину. AI-боты не умеют «читать» — они «жрут». Они штампуют по 100-200 запросов в секунду. При длительной нагрузке даже самый мощный сервер начнет «шалить» и давать сбои.
Представьте, что вы открыли ресторан. В обычный вечер приходит 100 человек — вы спокойно их обслуживаете. А теперь представьте, что к вам одновременно вломились 10 000 человек, и каждый требует внимания. Даже если у вас огромный зал и много официантов, вы просто не успеете. Образуется очередь, кухня зависнет, и ресторан встанет.
AI-проект — это не просто «сделать базу данных» и один раз заплатить за сервер. Это постоянная борьба.
Вы будете тратить время не на написание кода, а на защиту от ботов, разбирательства с хостингом и попытки понять, почему ваш сервер снова лег.
Поддержание такой базы будет жрать у вас максимум ресурсов, времени и денег. Вы должны быть готовы к этому с первого дня.
Для крупных корпораций (реселлеров, гигантов) это не проблема. У них есть бюджеты, штаты и обороты. Они могут позволить себе держать ферму серверов и команду из 50 человек.
А вот для средних компаний ситуация иная. Затраты на поддержание такой инфраструктуры порой в разы превышают окупаемость самого продукта.
Чтобы проект был в плюсе, он должен приносить от 1 до 2 миллионов рублей в месяц чистыми. И это только для того, чтобы выйти в ноль. А чтобы развиваться — нужно еще больше.
Средняя компания с оборотом в 60 миллионов рублей в год — это уже считается хорошим показателем. И если из этих 60 миллионов вы отдаете 40 на поддержание инфраструктуры, вы работаете не на себя, а на серверы и штат.
Возникает логичный вопрос: если всё так сложно и дорого, почему мои проекты до сих пор не рухнули под тяжестью затрат и ботов?
Ответ прост: это коммерческая тайна.
Мы нашли свой способ балансировать нагрузку, защищаться от ботов и удерживать инфраструктуру в рабочем состоянии. Мы прошли через блокировки, атаки и падения. И теперь мы знаем, как выдержать миллион запросов и при этом остаться на ногах.
Как именно мы это сделали — наш секрет. Пусть это останется нашим конкурентным преимуществом.
P.S. Если вы тоже хотите построить AI-проект, который выдержит смерч, — готовьтесь. И готовьте мощное железо. Потому что «сайт на коленке» не выживет.