Рубрика «эмбеддинги»

в 13:38, , рубрики: llm, Ollama, python, rag, streamlit, локальные модели, семантический поиск, эмбеддинги

Сделал бесплатный курс для тех кто хочет научиться создавать локальные ИИ приложения на Python. За семь занятий разберём помощника, который ищет по вашим документам, отвечает на вопросы и показывает исходные фрагменты для проверки.

Чат с документами выглядит просто. Положили файлы в папку, задали вопрос, получили несколько складных предложений. Но стоит ответу разойтись с текстом — и хочется увидеть всю кухню: что нашёл поиск, что отправили модели и откуда она взяла последнюю фразу.

В local‑docs‑aiЧитать полностью »

в 9:02, , рубрики: hybrid search, java, nlp, rag, reranking, retrieval, ruvds_статьи, spring ai, векторный поиск, эмбеддинги

В японских боевых искусствах путь мастера описывают тремя иероглифами — 守破離 (Сю-Ха-Ри): сначала следуй форме, затем меняй её, а после перестань от неё зависеть. Нельзя ломать то, что ещё не успел освоить.

守 (Сю) — это про то, как, сохранив себя, достичь своей лучшей версии. При чём здесь RAG? Да при том, что, прежде чем рваться к агентным RAG и GraphRAG, надо разобраться с базой — довести до ума уже имеющиеся формы, чтобы получить качественную систему.

Поэтому эта статья — про «Сю» продвинутого RAG: как фундаментально поднять качество, не перепрыгивая ступени «навороченности» с неоправданным риском.

Читать полностью »

в 12:28, , рубрики: bm25, llm, openpyxl, rag, база знаний, векторный поиск, корпоративный поиск, парсинг Excel, чанкинг, эмбеддинги

Треть нашей базы знаний лежит в выгрузках Excel, и на них ИИ-ассистент отвечает хуже всего. Разбираем, что теряется по дороге от ячейки до индекса.

Вопрос, на который ассистент не отвечает

У нас внутренний помощник по методологии. Он ищет по базе из нескольких сотен документов: регламенты в PDF, презентации, записки и примерно треть корпуса в Excel. Справочники категорий, прайс-листы, списки контрагентов. Всё это мы порезали на куски и сложили в векторный индекс, тридцать пять тысяч кусков.

Сотрудник спрашивает: «Является ли Северянка нашим партнёром?»

Читать полностью »

в 12:00, , рубрики: AlphaFold, one-hot encoding, representation learning, selectel, векторы, графовые нейронные сети, линейная алгебра, нейронные сети, химия, эмбеддинги

в 13:05, , рубрики: hnsw, pgvector, postgresql, qdrant, rag, архитектура, векторные базы данных, гибридный поиск, полнотекстовый поиск, эмбеддинги
PostgreSQL умер, да здравствует… PostgreSQL? - 1

Привет. Я хочу рассказать историю, которую вы уже, наверняка, где‑то слышали. Только с другой стороны.

Читать полностью »

в 12:00, , рубрики: BPE, Byte Pair Encoding, llm, selectel, контекстное окно, промпт-инжиниринг, токенизатор, токенизация, эмбеддинги, языковые модели
Почему токенайзер реж ет сло ва не там, где нужно - 1

Заголовок этой статьи, частично, наглядная демонстрация того, как его видит языковая модель. Куски слов, нарезанные по логике, которая к русскому языку не имеет вообще никакого отношения.

Читать полностью »

в 13:53, , рубрики: codex, Codex Pets, Yandex AI Studio, ydb, векторный поиск, рекомендательные системы, семантический поиск, эмбеддинги

В Codex можно поселить анимированного питомца. Пока агент работает, персонаж бегает, машет рукой, ждёт или печалится после неудачной команды. По его состоянию видно, что происходит с задачей. Сам пакет состоит из pet.json и атласа с кадрами анимации.

Самих питомцев я собрал в каталоге Codex Pets. Сейчас в нем 153 одобренных питомца: от красной панды и аксолотля до героев игр и старых мультфильмов. Любого можно посмотреть в браузере, скачать в ZIP или установить одной командой.

Читать полностью »

в 8:25, , рубрики: ai-ассистент, LLM-агенты, rag, базы знаний, Поиск по документам, эмбеддинги

Результаты годового чекапа пришли в пятницу вечером. Семь документов в личном кабинете лаборатории, в половине строк звёздочки «выше нормы» и «ниже нормы», запись к эндокринологу через две недели. Кто сдавал, тот знает этот вечер: гуглишь каждый показатель по отдельности, находишь ужасы, и нигде не написано, что все эти цифры значат вместе.

Работаю бэкендером, делаю базу знаний в Искре. Поэтому вместо поисковика открыл свой же продукт: загрузил туда все семь файлов и начал спрашивать.

Читать полностью »

в 9:27, , рубрики: embeddings, hard negatives, llm, LLM2Vec, qdrant, qwen3, rag, retrieval, vector search, эмбеддинги

в 18:49, , рубрики: Велтистов, детская литература, искусственный интеллект, машинное обучение, научная фантастика, теория информации, трансформеры, Шеннон, Электроник, эмбеддинги

Вместо эпиграфа

Наверняка все, у кого есть дети, слышали вопрос «чем ты занимаешься на работе?». Мне его точно задавали и неоднократно.

Дать ответ на этот вопрос ребёнку, не скатываясь в иронию, не так уж и просто. Но оказалось, что все ответы для нас уже подготовили. И не евангелисты из Кремниевой долины, а товарищи в кожаных плащах и пыльных шлемах, думавшие о том, как воспитать миллионы молодых инженеров, лет шестьдесят назад и ещё раньше.

Основание

Читать полностью »

123...4
Главная   |  Архив новостей  |   Android  |   Google  |   Apple  |   Microsoft  |   Информационная безопасность  |   Веб – разработка
Публикации RSS  |  Комментарии RSS
https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js