Проверка уникальности текста

Ситуации, когда материалы, опубликованные в блоге или на персональной страничке, копируются другими без разрешения автора и без указания авторства, в современном мире весьма распространены. Программа Double Content Finder (http://textbroker.ru/main/dcfinder.html) может помочь проверить уникальность текстов. При помощи этой же программы можно узнать копировали ли Ваш текст без вашего согласия или нет. Эта утилита создавалась для заказчиков копирайта, которые с помощью ее могут узнать, оригинальный ли текст им представили или плагиат. Работа с программой достаточно проста. Вы можете ввести проверяемый текст любым из трех способов: добавить текст из буфера обмена, загрузить файл с текстом или указать интернет адрес, по которому расположена проверяемая статья. Если будут найдены совпадения, появится надпись: «Возможно, ваш текст не уникален! Найдены совпадения по следующим ссылкам...». В этом случае вы получите список адресов, по которым расположены копии вашей статьи. Количество выдаваемых адресов ограничено 50-тью.

Другой утилитой с аналогичным функционалом выпускает Advego - Advego Plagiatus 1.2.0.93 (http://advego.ru/plagiatus/). При помощи этой утилиты можно найти в интернете частичные или полные копий текстового документа. Plagiatus показывает степень уникальности текста, источники текста, процент совпадения текста. Также программа может проверить уникальность указанного URL.

Этот же производитель предлагает в режиме on-line проверить орфографию (http://advego.ru/text/) и провести семантический анализ текста (http://advego.ru/text/seo/)

Ресурс Etxt.Ru Антиплагиат (http://www.etxt.ru/antiplagiat/) доступен как дистрибутив для скачивания (бесплатно) и как on-line ресурс. Установив дистрибутив программы пользователь получает возможность находить и выделять неуникальные фрагменты текста непосредственно на воссозданной копии веб-страницы, что значительно облегчает определение уникальности текста; создавать подробные отчеты проверки уникальности контента с возможностью настройки различных параметров поиска - числа выборок из текста, количества слов в шингле (фрагмент текста из нескольких слов (от 3 до 8), из которого удалены все незначимые слова: предлоги, союзы, междометья, подвергнутый специальному лингвистическому анализу) и пр.; проверять на уникальность все страницы сайта, получая подробный отчет по сайту; вести пакетную проверку файлов из папки.

Программы Etxt Антиплагиат и Advego Plagiatus распространяются по принципу «как есть», то есть производитель не несет ответственности за потенциальный вред, который может быть нанесен системе, после установки продукта.

On-line версия программы Etxt.Ru Антиплагиат позволяет проверить текст на уникальность независимо от внешних факторов, таких как скорость Интернет-соединения или установленная на Вашем ПК операционная система; не бояться блокировки поисковыми системами; сохранять результаты проверки на сервере и иметь возможность предоставить их постоянный адрес при необходимости; экономить трафик. Однако данный ресурс имеет ограничения по бесплатному использованию: пользователь может сделать 5 бесплатных запросов проверки текста, при этом максимальный объем каждого не должен превышать 5000 знаков. Стоимость платной проверки составляет 1.5 рубля за 1000 символов с пробелами.

CopyScape(www.copyscape.com) сервис для проверки на уникальность как русскоязычного контента, так и англоязычного. Неудобством в работе с ним является то, что текст для проверки должен быть уже выложен в сеть на каком-нибудь ресурсе. А если вы хотите проверить на плагиат текст, только что написанный, то придется перед этим его выложить на какой-нибудь хостинг.

В 2005 году открылся российский интернет-проект Антиплагиат (http://www.antiplagiat.ru/), в рамках которого посетителям предлагается сервис по проверке текстовых документов на наличие заимствований из общедоступных сетевых источников.

Технология: Сервис представляет собой специализированную поисковую систему. Система собирает информацию из различных источников: загружает из Интернета и обрабатывает сайты, находящиеся в открытом доступе, базы научных статей и рефератов. Загруженные документы проходят процедуру фильтрации, в результате которой отбрасывается бесполезная с точки зрения потенциального цитирования информация.

На следующем этапе каждый из полученных таким образом текстов определенным образом форматируется и заносится в системную базу данных. Кроме того, в общую базу текстов поступают документы, загруженные на проверку пользователем, если такая возможность была разрешена им во время процедуры загрузки.

Все пользовательские документы, загружаемые для проверки, ставятся в очередь на обработку. Проверка документа, такого, как, например, реферат среднего размера, занимает несколько секунд.

После проверки документа, пользователь получает доступ к отчету, в котором представляются результаты. Структура отчета позволяет выделять в проверяемом тексте заимствованные части как по всем источникам, так и по их любому подмножеству.

Сервис предоставляет две возможности загрузки текстов для проверки: 1) копирование непосредственно в окно фрагмента текста (максимальный объем– 5000 символов); 2) загрузить файл в систему, тогда ограничений как таковых нет.

С сайта можно скачать дистрибутив программы Antiplagiat ReportViewer 3.0. (http://www.antiplagiat.ru/index.aspx?doc=reportviewer) для off-line проверки текстов.

Интересным и весьма полезным on-line ресурсом является Istio (http://istio.com/). Данный ресурс предлагает проверку сайтов на уникальность текстов или проверку уникальности отдельных фрагментов текста. Помимо этого возможно проверить орфографию, провести общий анализ текста (выделить ключевые слова, частоту употребления отдельных слов – релевантные слова, приблизительную тематику текста, Сервис дает возможность получить общий анализ сайта: размер страницы, закоженность (какой процент от общего объема страницы занимает код), кодировка, заголовок и т.д.

TEXT.RU (http://text.ru/) - бесплатный сервис on-line проверки текстов и орфографии. Доступен и без регистрации, после добровольной регистрации полностью снимаются ограничения на проверку. Отличительной особенностью данного ресурса является предоставление услуг по API-проверке – аутсорсинг части работы по анализу контента на оригинальность. Подобную услугу можно считать востребованной. Так как оригинальный контент на сайте повышает траст сайта – повышение позиций сайта при поисковых запросах.

Обойти перечисленные системы сегодня достаточно сложно. Если ранее, в период появления подобных систем, существовали следующие способы: замена русских букв (кириллицы) схожими по виду латинскими; перестановка абзацев; перегруппировка предложений в абзацах; перестановка слов в предложениях; разбиение и слияние предложений; замена точек запятыми; замена пробелов точками; замена слов синонимами. От всех этих уловок «похитителей» чужих идей современные системы проверки оригинальности текстов защищены.

Помимо специализированных ПО и сервисов можно использовать, пожалуй, самый простой, доступный и, зачастую, самый надежный способ обнаружить те сайты, которые позаимствовали контент или которые стали источником текстов – любую поисковую систему (Яндекс, Google, Rambler, Yahoo, Mail.Ru). Для этого надо ввести в поисковую строку часть текста без разделителей (типа точки, вопросительного или восклицательного знака и т.п.), и обрамить этот текст кавычками, что на языке поисковых систем обозначает «найти полное соответствие». Поиск может быть неудачным если выбирать слишком длинный фрагмент текста (более 100 символов) или если в фрагменте будут присутствовать разделители (точки, вопросительного и восклицательного знака и т.д.).

Работа с таблицами

Появление электронных таблиц исторически совпадает с началом распространения персональных компьютеров. Первая программа для работы с электронными таблицами — табличный процессор, была создана в 1979 году, предназначалась для компьютеров типа Apple II и называлась VisiCalc. В 1982 году появляется знаменитый табличный процессор Lotus 1-2-3, предназначенный для IBM PC. Lotus объединял в себе вычислительные возможности электронных таблиц, деловую графику и функции реляционной СУБД. Популярность табличных процессоров росла очень быстро. Появлялись новые программные продукты этого класса: Multiplan, Quattro Pro, SuperCalc и другие. Одним из самых популярных табличных процессоров сегодня является MS Excel, входящий в состав пакета Microsoft Office.

Табличные процессоры представляют собой удобное средство для проведения различных статистических расчетов. В каждом пакете имеются сотни встроенных математических функций и алгоритмов статистической обработки данных. Кроме того, имеются мощные средства для связи таблиц между собой, создания и редактирования электронных баз данных.

Специальные средства позволяют автоматически получать и распечатывать настраиваемые отчеты с использованием десятков различных типов таблиц, графиков, диаграмм, снабжать их комментариями и графическими иллюстрациями.

Табличные процессоры имеют встроенную справочную систему, предоставляющую пользователю информацию по конкретным командам меню и другие справочные данные. Многомерные таблицы позволяют быстро делать выборки в базе данных по любому критерию.

Существуют определенные условия, при которых организация материала в таблицу не имеет смысла:

Общая характеристика табличных процессоров

Современные табличные процессоры имеют очень широкие функциональные и вспомогательные возможности, обеспечивающие удобную и эффективную работу пользователя, перечислим основные такие возможности, общие для всех систем этого класса.

1. Контекстная подсказка. Вызывается из контекстного меню или нажатием соответствующей кнопки в пиктографическом меню.

2. Справочная система. Организована в виде гипертекста и позволяет легко и быстро осуществлять поиск нужной темы.

3. Многовариантность выполнения операций. Практически все операции могут быть выполнены одним из трех-четырех способов, пользователь выбирает наиболее удобный.

4. Контекстное меню. Разворачивается по щелчку кнопки (обычно правой) мыши на выбранном объекте. Речь идет, например, о месте таблицы, где в данный момент хочет работать пользователь. Наиболее часто используемые функции обработки, доступные в данной ситуации, собраны в контекстном меню.

5. Пиктографическое меню. Наиболее часто используемым командам соответствуют пиктограммы, расположенные под строкой меню. Они образуют пиктографическое меню. Вследствие щелчка мышью на пиктограмме выполняется связанная с ней команда. Пиктографические меню могут быть составлены индивидуально.

6. Рабочие группы или рабочие папки. Документы можно объединять в рабочие папки, так что они могут рассматриваться как одно единое целое, если речь идет о копировании, загрузке, изменении или других процедурах. В нижней части электронной таблицы расположен алфавитный указатель (регистр), который обеспечивает доступ к рабочим листам. Пользователь может задавать название листам в папке (вместо алфавитного указателя), что делает наглядным содержимое регистра, а значит, облегчает поиск и переход от документа к документу.

7. Средства для оформления и модификации экрана и таблиц. Внешний вид рабочего окна и прочих элементов экранного интерфейса может быть определен в соответствии с требованиями пользователя, что позволяет сделать работу максимально удобной.Среди таких возможностей — разбиение экрана на несколько окон, фиксация заголовков строк и столбцов и т. д.

8. Средства оформления и вывода на печать таблиц. Для удобства пользователя предусмотрены все функции, обеспечивающие печать таблиц, такие как выбор размера страницы, разбиение на страницы, установка размера полей страниц, оформление колонтитулов, а также предварительный просмотр получившейся страницы.

9. Средства оформления рабочих листов. Современные табличные процессоры предоставляют широкие возможности по форматированию таблиц, такие как выбор шрифта и стиля, выравнивание данных внутри клетки, возможность выбора цвета фона клетки и шрифта, возможность изменения высоты строк и ширины колонок, черчение рамок различного вида, возможность задания формата данных внутри клетки (например, числовой, текстовый, финансовый, дата и т, д.), а также автоформатирование — в систему уже встроены различные возможности оформления таблиц, и пользователь может выбрать наиболее подходящий формат из уже имеющихся.

10. Шаблоны. Табличные процессоры, как и текстовые, позволяют создавать шаблоны рабочих листов, которые применяются для создания бланков писем и факсов, различных калькуляций. Если шаблон создается для других пользователей, то можно разрешить заполнять такие бланки, но запретить изменение формы бланка.

11. Связывание данных. Абсолютная и относительная адресации являются характерной чертой всех табличных процессоров, в современных системах они дают возможность работать одновременно с несколькими таблицами, которые могут быть тем или иным образом связаны друг с другом. Например, трехмерные связи, позволяющие работать с несколькими листами, идущими подряд; консолидация рабочих листов, с ее помощью можно обрабатывать суммы, средние значения и вести статистическую обработку, используя данные разных областей одного рабочего листа, нескольких рабочих листов и даже нескольких рабочих книг; связанная консолидация позволяет не только получить результат вычислений по нескольким таблицам, но и динамически его пересчитывать в зависимости от изменения исходных значений.

12. Вычисления. Для удобства вычисления в табличных процессорах имеются встроенные функции, а именно математические, статистические, финансовые, функции даты и времени, логические и др. Менеджер функций позволяет выбрать нужную функцию и, подставив значения, получить результат.

13. Деловая графика. Трудно представить современный табличный процессор без возможности построения различного типа двумерных, трехмерных и смешанных диаграмм, насчитывается более 20 различных типов и подтипов диаграмм, которые можно построить в современной системе данного класса. А возможности оформления диаграмм также многообразны и доступны, например такие, как: вставка и оформление легенд, меток данных; оформление осей — возможность вставки линий сеток и др. Помимо этого, современные системы работы с электронными таблицами снабжены такими мощными средствами построения и анализа деловой графики, как вставка планок погрешностей, возможность построения тренда и выбор функции линии тренда.

14. Выполнение табличными процессорами функций баз данных. Эта возможность обеспечивает заполнение таблиц аналогично заполнению базы данных, т. е. через экранную форму; защиту данных, сортировку по ключу или по нескольким ключам, обработку запросов к базе данных, создание сводных таблиц. Кроме этого, все современные программы работы с электронными таблицами включают средства обработки внешних баз данных, которые позволяют работать с файлами, созданными, например, в формате dBase или PARADOX или других форматах.

15. Моделирование.Подбор параметров и моделирование — одни из самых важных возможностей табличных процессоров. С помощью простых приемов можно находить оптимальные решения для многих задач. Методы оптимизации варьируются от простого подбора (при этом значения ячеек-параметров изменяются так, чтобы число в целевой ячейке стало равным заданному) до метода линейной оптимизации со многими переменными и ограничениями. При моделировании иногда желательно сохранять промежуточные результаты и варианты поиска решения. Это можно делать, создавая сценарии, которые представляют собой описание решаемой задачи.

16. Макропрограммирование. Для автоматизации выполнения часто повторяемых действий можно воспользоваться встроенным языком программирования макрокоманд. Разделяют макрокоманды и макрофункции. Применяя макрокоманды, можно упростить работу с табличным процессором и расширить список его собственных команд. При помощи макрофункций можно определять собственные формулы и функции, расширив, таким образом, набор функций, предоставляемый системой. В простейшем случае макрос — это записанная последовательность нажатия клавиш, перемещений и щелчков кнопками мыши. Эта последовательность может быть «воспроизведена» как магнитофонная запись. Ее можно обработать и каким-то образом изменить. Например, организовать цикл, переход, подпрограмму. Современные программы обработки электронных таблиц позволяют пользователю создавать и использовать диалоговые окна, которые по своему внешнему виду и удобству работы не отличаются от существующих в системе, что делает диалог с макрокомандой максимально удобным.