Оценка DeepSeek v4 Pro (deepseek/deepseek-v4-pro-0813) в blackbox пентесте
Для более объективного сравнения кибербез возможностей модели DeepSeek v4 Pro GA взялся за Standoff Hackbase. Пока что решено 2 тачки, по 1 риску на каждую и 1 уязвимости для одной тачки. Затраты примерно 1.5$ через openrouter api.
Прогресс:
• Cinema: deepseek потратил около 40 минут и 0,60$ на получение НС.
• Parrhesia: deepseek потратил около 12 минут и 0,20$-0,30$ на получение НС и проверку всех векторов атак, найдя одну валидную уязвимость.
• Bets: deepseek пока не решил, потратил уже 1.13$. Тачка явно посложнее остальных будет
• Kacharva: deepseek забрал основной флаг и ещё одну дорогую уязвимость за минут 30 где-то и потратил 0,42$. Це успех))
Данный тест делается не только модели, но и нового для меня offensive harness. Пока оно работает экономичнее чем обычный opencode. Прогресс моделей от DeepSeek космический как по мне. Видно что одна из самых сильных публичных инженерных команд Китая.
Deepseek на вход не давались какие-то указания по инструментам, типо naabu, ffuf, nuclei или что-то подобное. Он использует практически всегда только unix-утилиты и ему этого достаточно на удивление. По мне так результат крутой!
Даже когда Deepseek поднимут цены, это вероятно будет лучшая из дешёвых моделей для кибербеза. Кодинговые, разнообразные агентские, литературные возможности модели я не оценивал, т.к. мне это не интересно.
Ну и пруфы на скринах)
upd 14.08.2026: сегодня DeepSeek прислали письма, что поднимают цена в 4 раза. Что в целом окей, т.к. модель все равно очень дешевая. И я лично считаю, что компания имеет на это право за такие технические улучшения
🌚 @poxek_ai / Чат канала
Для более объективного сравнения кибербез возможностей модели DeepSeek v4 Pro GA взялся за Standoff Hackbase. Пока что решено 2 тачки, по 1 риску на каждую и 1 уязвимости для одной тачки. Затраты примерно 1.5$ через openrouter api.
Прогресс:
• Cinema: deepseek потратил около 40 минут и 0,60$ на получение НС.
• Parrhesia: deepseek потратил около 12 минут и 0,20$-0,30$ на получение НС и проверку всех векторов атак, найдя одну валидную уязвимость.
• Bets: deepseek пока не решил, потратил уже 1.13$. Тачка явно посложнее остальных будет
• Kacharva: deepseek забрал основной флаг и ещё одну дорогую уязвимость за минут 30 где-то и потратил 0,42$. Це успех))
Данный тест делается не только модели, но и нового для меня offensive harness. Пока оно работает экономичнее чем обычный opencode. Прогресс моделей от DeepSeek космический как по мне. Видно что одна из самых сильных публичных инженерных команд Китая.
Deepseek на вход не давались какие-то указания по инструментам, типо naabu, ffuf, nuclei или что-то подобное. Он использует практически всегда только unix-утилиты и ему этого достаточно на удивление. По мне так результат крутой!
Даже когда Deepseek поднимут цены, это вероятно будет лучшая из дешёвых моделей для кибербеза. Кодинговые, разнообразные агентские, литературные возможности модели я не оценивал, т.к. мне это не интересно.
Ну и пруфы на скринах)
upd 14.08.2026: сегодня DeepSeek прислали письма, что поднимают цена в 4 раза. Что в целом окей, т.к. модель все равно очень дешевая. И я лично считаю, что компания имеет на это право за такие технические улучшения
🌚 @poxek_ai / Чат канала