Делай RAG

Читатели могут помнить, как я недавно собирала у вас примеры того, как нейронки приносят в ответы по задачам по российскому праву неуместные англицизмы. Я их собирала для одного из двух докладов на Европейско-азиатском правовом конгрессе, который состоялся в начале июня. Какая это была замечательная поездка в почти-родной город! Очень трогательно было вернуться спикером на мероприятие, на котором я пару лет была в роли волонтёра-переводчика, когда училась в УрГЮУ. На одной из секций, которую мы провели с коллегами по сообществу @docsllm, я рассказывала уменьшенную версию доклада про влияние ИИ на LegalTech. А вот для другой секции, про языковые компетенции в эпоху ИИ, вообще рассуждала на достаточно новую для себя тему. И захотелось это рассуждение еще и положить в текст. Получился вот такой субботний отвлечённый лонгрид, эдакая тема обсудить в смоллтоке почти с любым человеком, так как здесь легко составить свое мнение и поспорить) (когнитивный) Груз из весов (моделей) Приятного чтения, и да — можно продолжать приносить мне примеры навязываемых нейронками англицизмов!

За неделю MCP-сервер получил около сотни вызовов, и MCP-обращения составили примерно 40% из всех обращений к поисковому сервису. И это напомнило мне о том, что я задолжала пост об опыте создания коннектора. Вот он! MCP-коннектор за выходные Делиться, в общем-то, почти нечем. Протокол настолько стандартизирован, что всё это вайб-кодится ну просто с полпинка, особенно в CLI-средах (вообще с ними уже особо не пообсуждаешь разные приколы из опыта создания программулек, в каком-то смысле это их минус). Но даже на таком небольшом датасете, как у меня, понадобилось принять несколько проектных решений, о которых я рассказала в посте. Это натолкнуло на разные мысли о судьбе UI как такового, о чистоте и готовности данных к тому, чтобы в них шныряли агентики… в общем, о судьбе, как обычно. Но это все в конце поста, а в начале матчасть про MCP, но в более или менее практическом срезе (с перечислением российских юридических коннекторов, между прочим…) Приятного чтения! ☕️

Сначала наш визионер Степан Леонтьев рассказал о том, что сделал MCP-коннектор для Claude с российским законодательством, и я ещё не поняла. Потом final boss российского лигалтеха сообщил о том, что есть план по оборачиванию своей базы в MCP, и я начала понимать, обкатывать в голове одну секретную пока идею, где MCP будет классной дополнительной фичей. А потом некий проект с судебной практикой сделал свой коннектор, и я поняла, что откладывать дальше некуда, тем более, что у меня есть идеальный объект для этого эксперимента… Представляю вашему вниманию MCP-коннектор к поисковому движку по практике ФАС! Документация приложена к посту, а в блоге еще и с картинками и бонусами. Там инструкции по всем основных мультиагентным системам, сценарии использования, примеры. Что такое MCP вообще можно посмотреть в Базе знаний. Дополнительный пост об этом опыте воспоследует. Но я страшно довольна результатами, есть некое раздражение на себя, что раньше не додумалась) с этим коннектором получается тот самый сферический agentic RAG в вакууме. При должной сноровке можете строить элегантные пайплайны, по сравнению с которыми бот будет не просто вчерашним днём, а прям жалким подобием. И пока проброшу мысль, что будущее СПС лежит в этом направлении. Коннектор бесплатный, без регистрации, с небольшим рейт лимитом. Обратной связи буду рада, разумеется. Если с установкой будут проблемы — сигнальте.

Коллеги, привет! Я с просьбой 🥹 Если в ваших юридических задачах по российскому праву бывало такое, что нейросеть (любая) выдавала термины, не характерные для российского права и обычных бизнес-практик, поделитесь, пожалуйста, такими примерами! Например, вот такие «посттерминационные акты». Или предложение описать неустойку в элементарном договоре поставки какой-то мелочи как «финансовый ковенант». Или просто неуместное рассыпание англицизмов и реалий англо-саксонских правопорядков в чем-то очень стандартном типа простых договоров и процдоков о чём-то посконном. Короче, когда не в тему умничает заморскими словьями. Надо для хорошего дела!) приносите сюда или в сообщения канала, по желанию с описанием из какой нейронки и для какой задачи.

В этот четверг я выступила на Конференции по вычислительным социальным наукам в Европейском университете с докладом о влиянии ИИ на российский LegalTech. Меньше чем за год ИИ-волна вынесла меня в позицию, из которой мне оказалось видно, как конкретный юрист может стать «сам себе лигалтековцем», как на это реагирует рынок, какие на нём вообще есть игроки и что происходит у работодателей юристов и потенциальных покупателей LT+AI-решений. И из этого сложился доклад (аттач или в блоге)! В начале выступления я предупредила слушателей, что доклад хоть и обзорный, но на всесторонний охват темы не претендует. Во многом он состоит из личных наблюдений и гипотез, а приведённые цифры собраны с большим количеством оговорок и ограничений — но из него всё равно видны некоторые устойчивые тренды. И он является хорошей отправной точкой либо для более глубокого и широкого обзорного пейпера, либо для сравнения через некоторое время, например, через год. Неполнота покрытия стала понятна на первом же вопросе: полностью в слепой зоне у меня оказалось отношение государства к этой теме, и особенно судебной системы. Замечательным штрихом, кольцующим всю концепцию, стало исследование Степана Леонтьева о том, сколько московских работодателей указывают в юридических вакансиях среди требований ИИ-навыки. Обязательно посмотрите отчёт у Степана. Мне сразу же захотелось об этом подумать, почему именно столько, и в рамках доклада высказала несколько предположений. Об этом пространно в блоге. Хочу поблагодарить коллег из Института проблем правоприменения за тёплый приём и интересные глубокие вопросы! Не знаю как, но коллеги затронули триггерные (в наилучшем смысле) для меня вопросы: и влияние на когнитивные способности, шифт в навыках, бенчмаркинг ИИ-сервисов для юридических задач. Обо всём этом, кажется, можно собирать отдельные мини-конференции. И хочу поблагодарить коллег, делившихся данными, вошедшими в доклад! Рунетлекс Академию в лице Павла Мищенко и Ксении Даньшиной, а также Эдуарда Мохныча, Мурата Мазукова, Григория Москалёва, Илью Семухина и, конечно, Степана Леонтьева. Ну и приём мыслей и рефлексии по всем поднятым в докладе вопросам не заканчивается, обязательно делитесь своими наблюдениями и ощущениями — соберём более полную картину.

С дорогими коллегами и соавторами встречаемся друг с другом и со всеми желающими в понедельник в Доме книги на Новом Арбате! Нужно зарегистрироваться здесь 🤓

В перерывах между садово-ландшафтными работами после долгой зимы небольшой вайб-кодинговый заводик родил то, до чего долго не доходили руки: наведён идеальный порядок в процессе пополнения данными всех рекламных проектов! #RAG_expansion, да не простой, а золотой, ведь налилось во все три кружечки: в датасете (ссылка 1 и ссылка 2) и поисковике 7770 дел, под ботом 2014, охват до мая 2026 года. Свежак! Но не это главное, главное, что теперь собран процесс, с которым невозможно больше будет прокрастинировать, и пополнения будут такими регулярными, что я вряд ли буду теперь о них сообщать в канале. Что поменялось: 🤩 Было: три разрозненных csv-таблицы, с разным набором колонок с разным регистром Стало: одна каноническая мастер-SQLite база, из которой деривативно собираются три артефакта для каждого проекта 🤩Было: Jupyter-ноутбук на ~30 ячеек (описанный здесь) с хаотичным логированием по 5 разным файлам, не переживающий обрывы соединения бесследно, совершенно неудобный в работе Стало: Python-пакет с CLI на Typer (это означает, что к программе можно обращаться через терминал комплексными командами (типа deploy --target search --dry-run), которые библиотека Typer сама разбирает на последовательность команд). Это сделано с прицелом на работу агента-ассистента в недалеком, надеюсь, будущем 🤩Было: разбор дел под бот глазами в numbers-таблице с ручным копипастом в основную таблицу, куча каких-то папок и файлов, в которые было больно смотреть Стало: прекрасный понятный интерфейс, где каждая операция в пайплайне в своем окошке, для каждой сессии любой операции — тоже свое окошко, удобная среда для грейдинга, ещё и всё по стайл-гайду. Приглашаю к любованию на скриншотах! И ещё масса всяких мелких и не очень изменений, которым я обязана Claude Code CLI. Не обошлось и без приколов: например, агент, делая тесты, из-за ряда мелких ошибок без разрешения задеплоил файл с RAGом для бота. Этого не надо было делать до того, как был бы обновлён код бота, чтобы правильно этот файл прочитать, из-за чего сервер с ботом упал. На это Клод стал отнекиваться, рассказывать, что у него (неё) алиби, и вообще это наверняка ты (я) сама сделала. Но с кем не бывает, было проведено расследование, всё выяснили и всё быстро починили. Короче, вот такое радостное у меня событие. На фоне всего этого появились всякие новые идеи и планы, как сделать бота получше, которые к его годовщине в конце июля скорее всего получится реализовать. Желаю всем прекрасного остатка майских праздников!

Наступает период, когда меня можно будет увидеть в нескольких местах с вещательной программой! #spectacle И первым будет очень важное для меня выступление, в котором я соберу свои наблюдения и предположения о том, куда мы катимся, что произошло в отношениях юристов и технологий за прошедший год. И мероприятие, и место — интереснейшие, и быть здесь — большая для меня радость. Мимоходом мелькнула мысль, что любая междисциплинарность — та зона интеллектуального труда, где трудно быть заменённым. Подробности о событии в посте у коллег!

Короткий обзор свежего препринта Microsoft с очень кликбейтным и алармистским заголовком — Учёные в Microsoft выяснили, что LLM портят документы! И что, мою апелляционную жалобу тоже?.. TLDR: ничего нового, продолжаем проверять за нейронками документы 💻 но если увидите в каких-нибудь айтишных пабликах саммери этой статьи в кликбейтной подаче, будете знать, с чем имеете дело! Лёгкое чтение на выходные, всех трудящихся поздравляю, остальным не завидую!)

Несу собранный на выходных лонгрид об одном неуспехе, с которым непросто мне было смириться: объяснимом, нестыдном, но всё же неуспехе в слишком амбициозной задаче на чужом поле (хотя где же вы, границы моего поля…) Сравнение 5 конфигураций RAG по судебной практике: почему я вам ничего не расскажу о результатах Чтение скорее загрузное (хотя я приложила массу усилий к тому, чтобы было понятно… потому что мне самой долго было непонятно), но если вам нравится жанр рассказов о том, как кто-то облажался, или вы когда-то задумывались о статистике, то, может, и понравится! Я много задумываюсь, это для меня большой интеллектуальный челлендж. Статистическим подкреплением маркетинговых утверждением легко пренебрегать — ну кто там будет разбираться? А к академическим практикам российский лигалтек как-то почти не склонен. Для рагостроителей и испытывающих исследовательский зуд тут тоже может найтись что-то полезное. Минимальнейшие 101 выкладки по стат.значимости на плакате (чтобы самой запомнить), любые мысли по поднятым вопросам приветствуются, а также если возжелаете помочь диванной науке — в конце поста по ссылке инструкции к действию. Всем отличной недели!