Разработка AI-системы автогенерации тестов и экзаменов

Проектируем и внедряем системы искусственного интеллекта: от прототипа до production-ready решения. Наша команда объединяет экспертизу в машинном обучении, дата-инжиниринге и MLOps, чтобы AI работал не в лаборатории, а в реальном бизнесе.
Показано 1 из 1Все 1564 услуг
Разработка AI-системы автогенерации тестов и экзаменов
Средний
~1-2 недели
Часто задаваемые вопросы

Направления AI-разработки

Этапы разработки AI-решения

Последние работы

  • image_website-b2b-advance_0.webp
    Разработка сайта компании B2B ADVANCE
    1361
  • image_web-applications_feedme_466_0.webp
    Разработка веб-приложения для компании FEEDME
    1251
  • image_websites_belfingroup_462_0.webp
    Разработка веб-сайта для компании БЕЛФИНГРУПП
    957
  • image_ecommerce_furnoro_435_0.webp
    Разработка интернет магазина для компании FURNORO
    1189
  • image_logo-advance_0.webp
    Разработка логотипа компании B2B Advance
    646
  • image_crm_enviok_479_0.webp
    Разработка веб-приложения для компании Enviok
    929

Преподаватели тратят до 40% времени на составление тестов, а студенты легко находят готовые ответы. Ручное создание 30-вопросного экзамена занимает 4–6 часов — и это только один вариант. Разработка AI-системы для автогенерации тестов окупается за несколько месяцев: экономия времени преподавателя до 70%, а стоимость теста снижается до 10–20% от ручного труда. Мы предлагаем решение: система генерирует уникальные экзаменационные задания по вашему материалу с учётом уровня сложности и таксономии Блума. Каждый студент получает свой вариант, проверка открытых ответов автоматизирована. Система интегрируется с LMS (Moodle, iSpring) и поддерживает кастомные форматы выгрузки. Получите консультацию по вашему проекту — мы оценим возможности автоматизации за один день.

Почему традиционные тесты перестают работать?

Ручное составление вопросов отнимает часы, а банки вопросов быстро устаревают. Студенты обмениваются ответами, преподаватель тратит время на проверку. AI-генерация решает обе проблемы: создаёт бесконечное множество вариантов и оценивает открытые ответы секундами. Согласно исследованию McKinsey, автоматизация рутинных задач высвобождает до 30% времени преподавателя.

Как AI генерирует вопросы по таксономии Блума?

Используем GPT-4o с промптами, заточенными под каждый уровень таксономии Блума: от запоминания фактов до создания новых продуктов. Код ниже показывает реализацию.

from openai import AsyncOpenAI
from enum import Enum
import json

client = AsyncOpenAI()

class BloomLevel(Enum):
    REMEMBER = "remember"
    UNDERSTAND = "understand"
    APPLY = "apply"
    ANALYZE = "analyze"
    EVALUATE = "evaluate"
    CREATE = "create"

BLOOM_PROMPTS = {
    BloomLevel.REMEMBER: "Создай вопрос на запоминание фактов, дат, определений",
    BloomLevel.UNDERSTAND: "Создай вопрос на понимание: объяснение, перефразирование, примеры",
    BloomLevel.APPLY: "Создай практическую задачу: применение знаний в новой ситуации",
    BloomLevel.ANALYZE: "Создай вопрос на анализ: сравнение, выявление причин, структурирование",
    BloomLevel.EVALUATE: "Создай вопрос на оценку: обоснование суждения, критика подхода",
    BloomLevel.CREATE: "Создай задание на синтез: разработка решения, создание продукта",
}

async def generate_question(
    topic: str,
    source_text: str,
    question_type: str,
    bloom_level: BloomLevel = BloomLevel.UNDERSTAND,
    difficulty: str = "medium"
) -> dict:
    response = await client.chat.completions.create(
        model="gpt-4o",
        messages=[{
            "role": "system",
            "content": f"""Создай тестовый вопрос.
            Тип: {question_type}.
            Уровень таксономии Блума: {bloom_level.value}. {BLOOM_PROMPTS[bloom_level]}.
            Сложность: {difficulty}.

            Для multiple_choice: 4 варианта, 1 правильный, 3 правдоподобных дистрактора.
            Для open_answer: эталонный ответ + критерии оценки.
            Для case_study: ситуация + 3-5 вопросов разного уровня.

            Верни JSON: {{
                question: "текст вопроса",
                type: "{question_type}",
                bloom_level: "{bloom_level.value}",
                options: ["A...", "B...", ...],
                correct_answer: "...",
                explanation: "почему именно этот ответ",
                scoring_rubric: {{...}}
            }}"""
        }, {
            "role": "user",
            "content": f"Тема: {topic}\n\nМатериал:\n{source_text[:2000]}"
        }],
        response_format={"type": "json_object"}
    )
    return json.loads(response.choices[0].message.content)

Генерация полного варианта экзамена

Собираем билет из вопросов с заданным распределением по уровням. Например, 30% на понимание, 30% на применение, 20% на анализ и 20% на запоминание.

async def generate_exam_variant(
    course_topics: list[str],
    total_questions: int = 30,
    time_limit_min: int = 60,
    bloom_distribution: dict = None
) -> dict:
    if not bloom_distribution:
        bloom_distribution = {
            BloomLevel.REMEMBER: 0.2,
            BloomLevel.UNDERSTAND: 0.3,
            BloomLevel.APPLY: 0.3,
            BloomLevel.ANALYZE: 0.2
        }

    questions_by_level = {
        level: int(total_questions * fraction)
        for level, fraction in bloom_distribution.items()
    }

    all_questions = []
    tasks = []

    for level, count in questions_by_level.items():
        for i in range(count):
            topic = course_topics[i % len(course_topics)]
            q_type = "multiple_choice" if level in [BloomLevel.REMEMBER, BloomLevel.UNDERSTAND] else "open_answer"
            tasks.append(generate_question(
                topic=topic,
                source_text="",
                question_type=q_type,
                bloom_level=level
            ))

    all_questions = await asyncio.gather(*tasks)

    return {
        "variant_id": f"V{random.randint(1000, 9999)}",
        "time_limit_min": time_limit_min,
        "total_points": sum(q.get("points", 1) for q in all_questions),
        "questions": list(all_questions),
        "bloom_distribution": {l.value: c for l, c in questions_by_level.items()}
    }
Уровень таксономии Тип вопроса по умолчанию Доля в билете
Remember multiple_choice 20%
Understand multiple_choice 30%
Apply open_answer 30%
Analyze open_answer 20%

Сравнение AI и ручного метода

AI-генерация в 10 раз быстрее: 30 вопросов за 2 минуты вместо 4–6 часов. Стоимость генерации теста в 5–10 раз ниже, а число уникальных вариантов — до 30 на вопрос.

Параметр Ручной метод AI-система
Время на 30 вопросов 4–6 часов 2–3 минуты
Количество вариантов 1–2 (с копиями) до 30 уникальных
Проверка открытых ответов вручную, часы автоматически, секунды
Стоимость за тест высокая (оплата труда) низкая (только API)

Как обеспечить уникальность вариантов?

Каждый вопрос — не копия. Система генерирует до 30 уникальных версий, меняя числа, имена, контекст и порядок вариантов. Сложность при этом остаётся одинаковой — проверено на десятках проектов.

async def generate_unique_variants(
    base_question: str,
    n_variants: int = 30,
    maintain_difficulty: bool = True
) -> list[dict]:
    response = await client.chat.completions.create(
        model="gpt-4o",
        messages=[{
            "role": "system",
            "content": f"""Создай {n_variants} уникальных версий вопроса.
            Варьируй: числа, имена, контекст, порядок вариантов ответа.
            Сложность {'должна оставаться одинаковой' if maintain_difficulty else 'может варьироваться'}.
            Верни JSON массив."""
        }, {
            "role": "user",
            "content": f"Исходный вопрос: {base_question}"
        }],
        response_format={"type": "json_object"}
    )
    return json.loads(response.choices[0].message.content)["variants"]

Автоматическая проверка открытых ответов

Для вопросов с открытым ответом AI-оценщик сверяет ответ студента с эталоном по рубрике и выставляет баллы с комментариями.

async def auto_grade_open_answer(
    question: str,
    correct_answer: str,
    rubric: dict,
    student_answer: str
) -> dict:
    response = await client.chat.completions.create(
        model="gpt-4o",
        messages=[{
            "role": "system",
            "content": f"""Проверяй ответ студента по рубрике.
            Вопрос: {question}
            Эталонный ответ: {correct_answer}
            Критерии оценки: {json.dumps(rubric, ensure_ascii=False)}

            Оцени ответ и верни JSON:
            {{score: 0-100, feedback: "подробная обратная связь", strengths: [], weaknesses: []}}"""
        }, {
            "role": "user",
            "content": f"Ответ студента: {student_answer}"
        }],
        response_format={"type": "json_object"}
    )
    return json.loads(response.choices[0].message.content)

Оценка на основе ансамбля моделей

Для надёжности проверки спорных ответов используем ансамбль из трёх разных AI-моделей. Если две модели дают одинаковую оценку — она финальная. При расхождении подключается третья, ответ помечается на ручную ревью. Это снижает риск ошибки до 1% на тест.

Почему важно распределение по уровням таксономии?Распределение вопросов по уровням Блума гарантирует, что тест оценивает не только запоминание, но и понимание, анализ и синтез. Это улучшает качество оценки студентов и соответствует современным образовательным стандартам.

Что входит в работу

  • Проектирование архитектуры генерации под ваш контент
  • Разработка промптов для всех уровней таксономии Блума
  • Интеграция с LMS (Moodle, iSpring, custom API)
  • Генерация до 30 уникальных вариантов на вопрос
  • Модуль автопроверки открытых ответов с рубриками
  • Документация, обучение преподавателей, поддержка 2 месяца

Процесс работы

  1. Аналитика — изучаем ваш учебный материал и требования к тестам
  2. Проектирование — определяем типы вопросов, распределение по уровням, формат выгрузки
  3. Реализация — пишем код генерации, интегрируем с вашей LMS
  4. Тестирование — проверяем на реальных студентах, корректируем промпты
  5. Деплой — запускаем в продакшен, передаём документацию

Сроки ориентировочно

  • Генератор тестов из готового текстового материала — 1–2 недели
  • Полноценная платформа с автопроверкой, аналитикой и интеграцией в LMS — 2–3 месяца

Стоимость рассчитывается индивидуально под ваш объём данных и требуемые интеграции. Экономия бюджета на обучение составляет 30–50% от затрат на ручное тестирование. Вложения в автоматизацию окупаются за 2 месяца. Оценим проект за один день — закажите индивидуальную демонстрацию, чтобы обсудить детали.

Более 5 лет опыта в AI/ML, 20+ проектов по генерации контента. Гарантируем стабильную работу и своевременную сдачу. Получите консультацию по вашему проекту — мы оценим возможности автоматизации за один день.

Генеративный AI разработка: от промпта к production API

Нам часто приносят задачу «сгенерируй изображение продукта» — на первый взгляд она простая. Но за этим стоит выбор между десятками моделей, настройка пайплайна инференса, ручное решение проблем consistency, интеграция в продуктовый бэкенд и ответ на вопрос, почему модель генерирует руки с шестью пальцами на стейджинге, но не на продакшене. Разберём направления, с которыми мы работаем.

Генерация изображений: от промпта к production API

Актуальный ландшафт — FLUX.1 [dev/schnell/pro] от Black Forest Labs и Stable Diffusion 3.5. FLUX.1 [schnell] делает 4 шага вместо 20–50 у SDXL — в 5–12 раз быстрее — и при этом держит качество выше. На A100 80GB — 1.2–1.8 с на изображение 1024×1024 при batch_size=4.

Типичная проблема при развёртывании: FLUX.1 [dev] требует 24+ GB VRAM в fp16. На A10G 24GB влезает впритык, при batch_size>1 — OOM. Решение: torch_dtype=torch.bfloat16 + enable_model_cpu_offload() из diffusers, либо квантизация через bitsandbytes в NF4 — падение качества минимально, потребление памяти снижается до 12–14 GB.

ControlNet и IP-Adapter — ключевые инструменты для production-задач, где нужна управляемость. ControlNet с Canny/Depth/Pose картой даёт структурный контроль. IP-Adapter (особенно IP-Adapter-FaceID) позволяет переносить identity персонажа на генерации — это основа для персонализированного контента. Подробнее о ControlNet можно прочитать в Wikipedia.

Кейс: e-commerce фотосъёмка. Ритейлер с 8000 SKU нуждался в lifestyle-фото для каждого продукта. Пайплайн: сегментация продукта (Segment Anything Model 2) → удаление фона → inpainting FLUX.1 [dev] с product image как IP-Adapter reference → upscale через RealESRGAN_x4plus. Стоимость генерации — $0.003/изображение на арендованных A100, vs $15–40 за профессиональную съёмку — экономия в 5000–13000 раз. Throughput — 200 изображений/час на 2× A100. Многолетний опыт 30+ проектов гарантирует, что мы выберем оптимальную модель под вашу задачу — оценку можно получить на старте.

Почему выбор модели — только половина успеха?

Fine-tuning под конкретный стиль или персонаж

Dreambooth и LoRA — стандарт для адаптации под конкретный визуальный стиль или объект. LoRA обучается за 2–4 часа на 20–30 референсных изображениях на одном A100. Rank 16–32 обычно достаточно для стиля, rank 64+ нужен для точного воспроизведения лиц.

Частая ошибка: обучать LoRA слишком долго — модель переобучается на референсы, теряет способность к вариативности. Признак: на cfg_scale=7 все изображения похожи на copy-paste референса. Лечится ранней остановкой (обычно 1500–2000 шагов для 20 изображений) и prior_preservation_loss.

Для более глубокой кастомизации — full fine-tuning через diffusers + accelerate с FSDP на нескольких GPU. Но это уже 40–80 часов обучения и нужен действительно большой датасет (1000+ изображений).

Сравнение подходов к генерации изображений

Модель Скорость (1024×1024, A100) Качество (CLIP score) Управляемость (ControlNet, IP-Adapter) VRAM (fp16)
Stable Diffusion 3.5 2.0–3.5 с 0.28–0.31 через ControlNet (разрешено) 16–20 GB
FLUX.1 [schnell] 0.8–1.2 с 0.30–0.33 ограниченная (без ControlNet) 12–14 GB (4‑шаговый)
FLUX.1 [dev] 3–5 с (50 шагов) 0.32–0.34 через IP-Adapter, ControlNet (адаптер) 24+ GB
Midjourney (API) 5–10 с (очередь) 0.31–0.33 промпт + style reference не требуется

Генерация видео: какие модели лучше?

Модель Доступность Длина Разрешение Управляемость
Sora (OpenAI) API (ограниченный) до 60 с 1080p промпт, image-to-video
Wan2.1 (Alibaba) open weights до 81 кадр 720p промпт, I2V, V2V
CogVideoX-5B open weights 6 с 720p промпт, I2V
Kling 1.6 API до 30 с 1080p промпт, I2V
Mochi-1 open weights 5.4 с 480p промпт

Open-weight видеомодели пока отстают от коммерческих по стабильности и длине. Wan2.1 — лучший выбор для self-hosted: 14B параметров, работает на 2× A100, даёт приемлемое качество для коротких клипов.

Главная боль видеогенерации — temporal consistency: персонаж меняет цвет одежды на третьей секунде, объект «плывёт». Частичное решение — генерация с motion_bucket_id и noise_aug_strength в Stable Video Diffusion, или использование I2V (image-to-video) вместо чистого text-to-video. Как отмечается в исследовании VideoPoet, consistency достигается за счёт обучения на длинных последовательностях.

AnimateDiff остаётся рабочим инструментом для коротких петель и motion-эффектов поверх SD/FLUX. Не Sora, но деплоится локально и предсказуем.

Генерация музыки и аудио

AudioCraft от Meta (MusicGen + AudioGen) — production-готовый стек для музыкальной генерации. musicgen-large (3.3B) генерирует 30 с музыки за ~8 с на A100. Управление через текстовый промпт и melody conditioning — можно задать мелодию напеванием.

Stable Audio Open от Stability AI — альтернатива с длиной до 47 с, лучшая управляемость структурой (intro/verse/chorus). Деплой аналогичен: diffusers + FastAPI.

Для voice-over и озвучки — ElevenLabs API или self-hosted XTTS v2 (см. услугу Speech AI). Для sound design и foley — AudioGen.

3D-генерация: практическое состояние

3D-генерация всё ещё не добралась до той же зрелости, что 2D. Но для конкретных задач инструменты уже рабочие:

TripoSG и Shap-E — text/image-to-3D. Shap-E от OpenAI генерирует простые 3D-меши за секунды, но геометрия грубовата. TripoSG даёт более детальные результаты, но требует постпроцессинга (ремешинг, UV-развёртка).

Wonder3D и Zero123++ — реконструкция 3D из одного изображения. Работают через генерацию multi-view (6–8 видов) и последующее 3D-восстановление через NeuS или instant-ngp.

Gaussian Splatting (3DGS) — не генерация, а реконструкция из серии фото/видео. Для товарных карточек и недвижимости это уже production: 50–200 фото → 3DGS модель за 15–30 мин на RTX 4090 → интерактивный 3D-вьювер в браузере.

Инфраструктура и деплой

Для генеративных моделей критично:

  • Очередь задач — Celery + Redis или Ray Serve. Синхронный HTTP для генерации изображений неприемлем при >5 конкурентных запросов.
  • Кэширование — схожие промпты дают похожие результаты. Семантический кэш через эмбеддинги (faiss + sentence-transformers) может снизить нагрузку на GPU на 20–40%.
  • Мониторинг качества — CLIP score для text-image alignment, FID для оценки распределения генераций. Интеграция в MLflow или Weights & Biases.
  • Хранение — сгенерированные изображения сразу в S3/MinIO, не на диске сервера инференса.

Что входит в работу (deliverables)

Мы берём проект под ключ — от выбора модели до деплоя и мониторинга. В результат входит:

  • Модель (или API-интеграция) с бенчмарками производительности (latency p99, throughput).
  • Документация пайплайна (prompt engineering guide, model card, версии зависимостей).
  • Интеграция с вашим бэкендом (REST/gRPC, очереди).
  • Настроенный мониторинг (дашборды, алерты по дрейфу качества).
  • Обучающий воркшоп для команды (2–4 часа).
  • Гарантийная поддержка 3 месяца после запуска — в рамках сертификата качества на нашу работу.

Исторически мы выполнили 30+ проектов в генеративном AI — это даёт нам право гарантировать результат.

Как строится процесс разработки генеративного AI?

  1. Аналитика (1–2 дня): аудит текущей архитектуры, уточнение use case, выбор моделей и метрик успеха. Оцениваем проект бесплатно.
  2. Proof of Concept (1–3 недели): быстрый прототип на ваших данных — чтобы видеть реальное качество, а не демо из блога.
  3. Проектирование (1–2 недели): архитектура пайплайна, инфраструктура (GPU-кластер/API), план A/B-тестирования.
  4. Реализация и fine-tuning (4–12 недель): разработка, обучение LoRA/full fine-tuning, интеграция с очередью и кэшем.
  5. Тестирование (1–2 недели): нагрузочные тесты, валидация метрик, проверка на edge-case (негативные сценарии).
  6. Деплой и мониторинг (1–2 недели): развёртывание на production, настройка мониторинга, документирование.
Что мы проверяем на этапе Proof of Concept
  • Соответствие ожиданий и реального качества генерации (CLIP score, user study).
  • Скорость инференса при разных batch_size и типах GPU.
  • Вероятность токсичных/некорректных генераций — проверка safety filters.
  • Возможность масштабирования: будет ли модель вывозить пиковую нагрузку.

Сроки ориентировочно

Интеграция готового API (DALL‑E 3, Midjourney API, Stability API) — 1–2 недели. Self-hosted пайплайн с fine-tuning — 6–12 недель. Полная платформа с UI, очередями и мониторингом — 3–6 месяцев. Конкретная стоимость рассчитывается индивидуально после анализа вашего сценария.

Свяжитесь с нами — закажите консультацию, и мы подберём оптимальную архитектуру для вашего проекта. Получите предварительную оценку стоимости и сроков бесплатно.