Дмитрий
f981f92e23
Два живых бага демо 12.07.2026 (TDD, 34/34 зелёные): - KnowledgeSearch: websearch_to_tsquery требует ВСЕ слова вопроса; «зачем он нужен» ронял поиск в пусто → добавлен мягкий запасной проход через ИЛИ (plainto | ) - BotAnswerService STOP_PATTERN: «какой у меня сейчас баланс» проскакивал стоп-тему (слова между «у меня» и «баланс») → допускаем до 3 слов разрыва, сч[её]т - Протокол: журнал 12.07 (аккаунт Jivo, канал, цвет, ключ zofyNxmnRP, стенд-проверка) - Скриншоты живой проверки виджета в findings Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>
106 lines
4.9 KiB
PHP
106 lines
4.9 KiB
PHP
<?php
|
|
|
|
declare(strict_types=1);
|
|
|
|
use App\Models\KnowledgeChunk;
|
|
use App\Services\Bot\BotAnswerService;
|
|
use Illuminate\Foundation\Testing\RefreshDatabase;
|
|
use Illuminate\Support\Facades\Http;
|
|
|
|
uses(RefreshDatabase::class);
|
|
|
|
beforeEach(function () {
|
|
config()->set('services.yandexgpt', [
|
|
'api_key' => 'k', 'folder_id' => 'f', 'model' => 'yandexgpt-lite/latest',
|
|
'endpoint' => 'https://llm.api.cloud.yandex.net/foundationModels/v1/completion',
|
|
'timeout_seconds' => 8,
|
|
]);
|
|
KnowledgeChunk::create([
|
|
'source_path' => 'help/p.md', 'title' => 'Что такое проект', 'tour' => 'create-project',
|
|
'topics' => 'создать проект', 'chunk_index' => 0,
|
|
'content' => 'Проект — это заявка на поток клиентов.',
|
|
]);
|
|
});
|
|
|
|
it('стоп-тема (мой баланс) → эскалация без похода в LLM', function () {
|
|
Http::fake();
|
|
|
|
$answer = app(BotAnswerService::class)->answer('какой у меня баланс?');
|
|
|
|
// Текст именно стоп-эскалации («передаю ему диалог»), а не «в инструкции нет ответа»:
|
|
// до фикса 12.07.2026 вопрос проскакивал стоп-гейт и эскалировал лишь пустым поиском.
|
|
expect($answer->escalate)->toBeTrue()
|
|
->and($answer->text)->toContain('передаю ему диалог');
|
|
Http::assertNothingSent();
|
|
});
|
|
|
|
it('стоп-тема со словами между «у меня» и «баланс» → эскалация ДО поиска и LLM', function () {
|
|
// Живой баг 12.07.2026: «какой у меня сейчас баланс?» проскакивал мимо стоп-темы,
|
|
// поиск находил статью про пополнение и бот отвечал общими словами вместо передачи
|
|
// человеку. Статья про баланс в базе ЕСТЬ — эскалация обязана сработать раньше поиска.
|
|
KnowledgeChunk::create([
|
|
'source_path' => 'help/b.md', 'title' => 'Как пополнить баланс', 'tour' => 'top-up-balance',
|
|
'topics' => 'пополнить, баланс', 'chunk_index' => 0,
|
|
'content' => 'Пополнить баланс: раздел Биллинг, кнопка Пополнить.',
|
|
]);
|
|
Http::fake();
|
|
|
|
$answer = app(BotAnswerService::class)->answer('какой у меня сейчас баланс?');
|
|
|
|
expect($answer->escalate)->toBeTrue()
|
|
->and($answer->text)->toContain('передаю ему диалог');
|
|
Http::assertNothingSent();
|
|
});
|
|
|
|
it('просьба позвать человека → эскалация', function () {
|
|
Http::fake();
|
|
|
|
expect(app(BotAnswerService::class)->answer('позовите оператора')->escalate)->toBeTrue();
|
|
});
|
|
|
|
it('вопрос не по базе (пустой поиск) → честное «не знаю» + эскалация', function () {
|
|
Http::fake();
|
|
|
|
$answer = app(BotAnswerService::class)->answer('какая погода в москве');
|
|
|
|
expect($answer->escalate)->toBeTrue();
|
|
Http::assertNothingSent();
|
|
});
|
|
|
|
it('обычный вопрос → ответ LLM по контексту, без эскалации', function () {
|
|
Http::fake([
|
|
'llm.api.cloud.yandex.net/*' => Http::response([
|
|
'result' => ['alternatives' => [['message' => ['role' => 'assistant', 'text' => 'Проект — это заявка на поток клиентов.']]]],
|
|
]),
|
|
]);
|
|
|
|
$answer = app(BotAnswerService::class)->answer('что такое проект?');
|
|
|
|
expect($answer->escalate)->toBeFalse()
|
|
->and($answer->text)->toContain('Проект')
|
|
->and($answer->matchedChunkIds)->not->toBeEmpty();
|
|
});
|
|
|
|
it('tour-ссылка добавляется только при включённом tours_enabled', function () {
|
|
config()->set('services.jivo_bot.tours_enabled', true);
|
|
config()->set('app.url', 'https://liderra.ru');
|
|
Http::fake([
|
|
'llm.api.cloud.yandex.net/*' => Http::response([
|
|
'result' => ['alternatives' => [['message' => ['role' => 'assistant', 'text' => 'Проект — это…']]]],
|
|
]),
|
|
]);
|
|
|
|
$withTours = app(BotAnswerService::class)->answer('что такое проект?');
|
|
expect($withTours->text)->toContain('https://liderra.ru/?tour=create-project');
|
|
|
|
config()->set('services.jivo_bot.tours_enabled', false);
|
|
$without = app(BotAnswerService::class)->answer('что такое проект?');
|
|
expect($without->text)->not->toContain('?tour=');
|
|
});
|
|
|
|
it('LLM недоступен → эскалация', function () {
|
|
Http::fake(['llm.api.cloud.yandex.net/*' => Http::response('err', 500)]);
|
|
|
|
expect(app(BotAnswerService::class)->answer('что такое проект?')->escalate)->toBeTrue();
|
|
});
|