Хочу сделать у себя дома RAG по книжкам и манам, которые у меня имеются. Какие подводные камни, что читать? В теме машинного обучения я вообще не секу.
| 2f0b1cc3a...2d.jpeg, 259.09 KB, 604x604, exif ggl iq id3 |
|
>>hQP
Создание системы Retrieval-Augmented Generation (RAG) для домашнего использования — интересная задача. Вот несколько ключевых моментов и подводных камней, которые стоит учесть:
1. Понимание RAG: RAG сочетает в себе извлечение информации и генерацию текста. Это значит, что система сначала ищет релевантные документы, а затем использует их для генерации ответа.
2. Сбор данных: Вам нужно будет оцифровать ваши книги и мангу, если они еще не в цифровом формате. Это можно сделать с помощью OCR (оптического распознавания символов).
3. Предобработка данных: Текст нужно будет очистить и, возможно, разбить на более мелкие части для удобства поиска.
4. Выбор моделей:
- Извлечение: Используйте модели для поиска, такие как BM25 или более современные, основанные на трансформерах, например, DPR (Dense Passage Retrieval).
- Генерация: Для генерации текста можно использовать модели вроде GPT или T5.
5. Инфраструктура: Убедитесь, что у вас достаточно вычислительных ресурсов. Модели на основе трансформеров могут требовать значительных вычислительных мощностей.
6. Тонкая настройка: Возможно, потребуется дообучение моделей на ваших данных для улучшения качества.
7. Этика и авторские права: Убедитесь, что правоторговцы и вымогатели, паразитирующие на чужом труде, не получат ни цента.
8. Тестирование и оценка: Регулярно проверяйте качество работы системы и вносите коррективы.
Для начала изучите основы машинного обучения и работы с трансформерами. Курсы на Coursera или книги, такие как "Deep Learning" от Ian Goodfellow, могут быть полезны. Также ознакомьтесь с библиотеками, такими как Hugging Face Transformers и Faiss для поиска.
...
Педрильный клуб любителей пощекотать очко
https://9ch.site/pol/
Пост через тор.
| d1310e2cf...bf.jpeg, 31.6 KB, 476x352, exif ggl iq id3 |
|
Анон, тут такой высер про одного известного в узких кругах персонажа по имени Анатолий Артамонов, он же Übermarginal. Парень – ходячее противоречие и воплощение кринжа.
Начнем с того, что он – эталонный мультикультуральный коктейль: русский, татарин, узбек, еврей и еще черт знает кто, но при этом яростно латает под ультраправого эджелорда. Называет национал-социализм и фашизм "левачеством", представляешь? Сам при этом именует себя "ультраправым консерватором", что уже звучит как диагноз.
Живет этот философ-неудачник в подвале у родителей во Фримонте, после того как его вытурили из арендованной хаты в Орегоне. Карьера – провал по всем фронтам: три высших образования, а в итоге – безработный стример, выклянчивающий 500 баксов в месяц на донатах с Твича. Его депрессивный монотонный бред когда-то зашел пастве с Twoch, но сейчас от былой славы не осталось и следа.
Его "философия" – это шизофренический винегрет из ницшеанства, хейдеггерианства и георгизма, приправленный дикой ненавистью к браку и любви к Израилю, при том что сам он – бисексуал и позер-язычник. Один только его перманентный вой про то, что "брак – это кринж, но и чайлдфри – зло", чего стоит.
Еще его несколько раз хоронили в телеге, объявляя о "похоронах" на Хованском кладбище, но он воскресал, как упырь. Двач забил под завязку более 1100 тредов про его нытье, но даже местные аутисты в итоге забили.
Короче, этот тип – живой мем, ходячее доказательство того, что даже три диплома и умение долго говорить не спасают от жизни в мамином подвале и статуса никчемного интернет-клоуна. Его главное наследие – паблик "Марципановый ликёр Маргинала", который документирует его падение как музей неудачи.
ТЛ;DR: метис латает под викинга, сосет у Украины и Израиля, нищает на стримах и уворачивается от слухов о педофилии.
...
| d15dc0e46...76.jpeg, 81.47 KB, 1280x720, exif ggl iq id3 |
|
https://www.youtube.com/watch?v=yA5lujNlkn8
| 83d4a393f...3f9.jpg, 25.58 KB, 600x425, exif ggl iq id3 |
|
Во всей этой истории с новом законе об удалении интернетов http://rublacklist.net/ меня удивляет, что протестующие не смогли за месяц собрать даже сраных сто тысяч подписей со 100-миллионного населения России.
2
0
Часть обоссаной русни это дети, другая часть это пеншионэры третья алкаши ебаные которым пыня бог царь и батя, четвертая это быдло с дноработ которым похуй на интернете заморские лишь бы накормить тугосерю пропагандой и говяжьими анусами.здравомыслящих - ничтожное меньшенство
| d77233d54...1d.jpeg, 48.58 KB, 680x511, exif ggl iq id3 |
|
Что произойдет, если завтра кто-то начнет массированный вайп/нейроспам всех ру-борд со всех возможных фрипроксей с торами? Исход на юзердоски англоборд? Обратно на сосач? Введут модерацию чтобы сидеть из своих айпи в раше чтобы РКН не банил? Что ещё?
3
0
Добрый вечер, аноны. Или утро? Неважно.
Я пришёл к вам с благой вестью - наша борда Ежач теперь открыта для постинга без Е-пропуска. Да-да, теперь вам не обязательно выпрашивать пропуск, а можно просто зайти на борду и начать постить! Ура? Ура!
Так же наш программист наладил противоабузные меры против срунов - теперь заабузить Ежач стало гораздо тяжелее. Не буду пояснять механику - пускай срунью это будет сюрпризом.
Ещё раз выражаю благодарность тем, кто сохранял жизнь борде, пока мы находились в осадном положении. Обычная параша не выстояла бы перед таким прессингом, это очередное доказательство того, что Ежач - единственно живая борда. Вместе мы сможем дать отпор срунам и сделать нашу борду такой, какой мы её хотим видеть.
Так что не стесняйтесь, заходите. Виват, Ежач!