Матрицы для анализа текста
Матрица контекстной совстречаемости (Co-occurrence Matrix) Применение: Анализ семантики, векторные представления слов (например, в word2vec до его появления).Описание: Пример:Для предложений: кот […]
Лингвистика
Лингвистика
Лингвистика
Сравнение текстов «вручную»
Сравнение текстов — важная задача в обработке текстов, анализе данных и исторических исследованиях. Поиск похожих документов с помощью косинусной близости — популярный
Лингвистика
Классификация текстов и сентимент-анализ
Историческая справка Сентимент-анализ (анализ тональности текста) начал развиваться в конце 1990-х – начале 2000-х годов с ростом интернета и социальных
Лингвистика
Анализ семантической близости
Измерение близости объектов — одна из старейших задач математики и компьютерных наук. 1. Ранние статистические методы (1950–1970-е) Косинусное сходство Евклидово
Лингвистика
Векторное представление слов
Векторные представления слов (Word Embeddings) — это числовые векторы, которые кодируют семантическое и синтаксическое значение слов так, что слова с похожим
Лингвистика
Матрица внимания
Матрица внимания — это «карта влияний», показывающая, как сильно каждое слово в предложении зависит от других слов при формировании своего
Лингвистика
Матричное представление фонетических признаков
Матричное представление фонетических признаков в теории отличительных признаков (ОП) Романа Якобсона — это способ описания звуков языка с помощью бинарных
Лингвистика
Тензорные разложения vs. LSA и LDA
Тензор — это многомерная таблица чисел. Чем больше измерений (осей), тем «выше» ранг тензора. Тензоры в лингвистике помогают анализировать многомерные языковые
Лингвистика
Матрица совместной встречаемости
Матрица совместной встречаемости (Co-occurrence Matrix) — это инструмент, используемый в анализе текстов и компьютерной лингвистике для измерения частоты совместного появления слов
Лингвистика
Матрицы смежности для графов зависимостей
Матрица смежности — это способ представления графа в виде квадратной матрицы, где строки и столбцы соответствуют вершинам, а элементы матрицы
Лингвистика
Синтаксические матрицы
Синтаксические матрицы в лингвистике – это метод анализа и представления синтаксической структуры предложения в виде матрицы (таблицы), где строки и столбцы
Лингвистика
Алгебра матриц в лингвистике
Матричная алгебра находит применение во многих областях науки, включая лингвистику. Она используется для моделирования языковых структур, анализа текстов, машинного перевода,
Индексы удобочитаемости текста
1. Индекс Lively-Pressey (1923) Индекс Ливли-Пресси (Lively-Pressey) — это один из традиционных статистических индексов, применяемых в экономическом анализе для оценки
Золотое сечение в стихах Пушкина
Золотое сечение — это математическая пропорция (примерно 1,618), которая встречается в природе, искусстве и даже в поэзии. Многие исследователи считают, что