Работа над функционалом

Теги книг.

В структуре fb2 есть поле "keywords", где могут быть прописаны теги книги. Теги парсились, но никак не использовались.
Теперь в меню "Навигация->Библиотечное" есть пункт "Теги книг" (или по url http://coollib.net/keywords). Страница содержит все теги, которые есть в базе. Идут они в порядке убывания. Обновление страницы - раз в час.
Нажатие на тег ведёт на страницу с книгами в которых прописан этот тег.
На странице книги, после описания, появилась линейка тегов, которые присутствуют в этой книге.
Там же есть кнопочка "добавить/исправить теги".
В fbd добавленные теги также будут прописаны.
Замечания или сообщения о ошибке пишите в ЛС.

Для большей информативности изменён тег экслибриса для книги:


вместо
теперь
если тег стоит - добавится экслибрис.


На странице книг форматов pdf и djvu (без обложки) добавилась кнопка "Создать обложку из первой страницы". Нажатие на неё соответственно создаст обложку из первой страницы уже закачанной книги. Сделано на тот случай, если Вы забудете создать обложку при добавлении книги. Можно также использовать для создания обложек у книг, которые были закачаны до внедрения опции создания обложки.

Мини-обложка

На странице редактирования книги (в разделе "файл") теперь показывается мини-обложка и добавилась возможность её обновить.
Мини-обложка показывается в списках (показывать: обложки). Может отображать устаревшую обложку или самодельную обложку (если книга изначально была без обложки).

Мини-статистика пользователя

На странице "учетные данные" (http://coollib.net/user/me) добавился пункт "Статистика пользователя".

Статистика содержит такие данные:

Временно отключен конвертер epub

В связи с нестабильной работой скрипта и созданием большой нагрузки на железо временно отключен конвертер epub.

Давно просили сделать какую то пометку для "взрослых" книг.

возрастное ограничение:
- "взрослые" жанры: Порно (love_hard), Эротика (love_erotica), Эротика, Секс (home_sex)
- на странице жанров, жанра и книг (с прописаными этими жанрами) выводится сообщение "возрастное ограничение 18+"

пара доработок:
- На странице объединения книг (обработки дублей) добавлен показ мини-обложек объединяемых книг.
- При добавлении книг робот не будет ругаться на дубль книги, если книги (существующая и добавляемая) в разных форматах.

Список OCR:

При добавлении книг в формате djvu и pdf теперь добавлено ещё одно поле с вопросом: "Добавить книгу в список на распознавание (OCR)?" (по-умолчанию стоит "ДА").
Если добавляемая книга интересная/популярная, то она добавится в список на распознавание. Книгоделы смогут отобрать её для распознавания и создания удобочитаемого формата (fb2, epub и т.д.) или найти уже готовую в соответствующем формате. Если же это журнал, газета, техническая литература, то лучше выбрать "НЕТ" т.к. такую литературу нет смысла распознавать.
У такой книги в названии добавится значек "OCR".
Снять эту метку можно на странице книги ("исправить", раздел "файл" - чекбокс "Добавить в список OCR"). ВНИМАНИЕ! Чекбокс может не сработать т.к. изменился javascript, а Ваш браузер может ещё не обновить его и подгрузить сохранённую в кэше версию. В этом случае поможет очистка кэша браузера либо браузер сам через некоторое время обновит скрипт.

В "Статистике" добавились два списка:

- Требуется OCR - список с вышеописанными книгами для создания удобочитаемого формата. Я внёс все ранее добавленные djvu и pdf в этот список и убрал из него все журналы.
Перед генерацией списка происходит проверка книг с меткой OCR на наличие fb2 версии с тем же автором и названием. При совпадении метка OCR будет снята и книга удалена из списка. Принудительно метку можно поставить на странице редактирования книги. Во избежание повторного снятия метки заполните доп.инфо неправильной/неполной fb2-книги, которую робот принял за дубль (например: "неполная версия" или "старое издание" и т.д.), книги с заполненным доп.инфо не будут считаться дублями и не снимут метку. Список сортируется по количеству скачиваний т.е. по востребованности книги и необходимости создания экземпляра удобочитаемого формата.
- Книги созданные для КулЛиб - это список книг с экслибрисом.

подправлен поиск книг

Теперь в результатах поиска есть ещё одна строка "Найденные книги с таким тегом:"
Теперь поиск затронет и ключевые слова (теги) книг. Соответственно будут показаны книги, содержащие искомый тег.
Например: запрос ЛитРПГ найдёт всего одну книгу, а вот книг содержащих этот тег - несколько десятков.

Подсветка заблокированных книг

На странице профиля повился новый пункт: "Подсветка ссылок заблокированных книг";
Тут можно установить цвет для ссылок ("читать","скачать","на почту") у заблокированных книг.
В поле требуется ввести цвет в виде html-кода без # т.е. только буквы-цифры. Например: чтобы сделать ссылки красными вводим "ff0000", зелеными - "008000" и тд... Ссылка на вики о кодах цветов html там присутствует.

Напоминаю, что на сайте многое кэшируется (страницы, запросы из базы, файлы css и javascript...), и пока сервер и браузер не обновят кэш функция может не срабатывать.

п.с. у Продвинутых ссылки цвет менять не будут.

Подсветка ролей. Сделана подсветка ролей (библиотекарь, пп и тд.) на форуме и в блоке "Кто на сайте". Библиотекари и администратор - зеленым, продвинутые пользователи - синим, пользователи с wiki-блоком - красным.

Книги со старой орфографией. Сделана возможность проставить книге значок означающий старую орфографию. Сделан он по типу экслибриса или OCR. Проставляется на странице редактирования книги (под полем изменения названия книги). В статистике тоже добавился пункт со списком таких книг. "Книги со старой орфографией" http://coollib.net/stat/old

"(иллюстрации)"
На странице книги, там где (fbd) (post) ... добавился пункт "(иллюстрации)". Соответственно он показывает все иллюстрации присутствующие в книге.
rнопка "иллюстрации" не показывается в книгах, где одна иллюстрация (она уже показана как обложка) или их нет вообще.

Записная книжка
В книжной полке добавился пункт "Записная книга". Эта страница представляет собой обычное текстовое поле с возможностью ввода и сохранения текста. Сделано для того, чтобы желающие могли записать книгу или ссылку на прочтение или другое. Может быть удобно тем, кто меняет технику-средства выхода в интернет и нет при себе возможности записать о книге или ссылке.

Отключение рейтинга рецензий

В профиле появился пункт:

Установка галочки чекбокса отключает показ рейтинга. Т.к информация кэшируется, изменения вступают в силу через 1 - 30 сек. после установки/снятия чекбокса.

Обработка папки при "Добавлении книги"

Во избежание ошибочного добавления, а в случае не прохождения валидации - удаления чужого файла, через функцию "добавление с помощью фтп" изменена обработка папки с файлами.
Теперь содержимое папки будет показано только пользователю с таким же именем. Т.е. содержимое папки "Вася" будет показано только пользователю "Вася".
Если Вы не сразу добавляете книги, то лучше их хранить в своей именной папке, это убережёт их от случайного добавления/удаления другим пользователем.
Не добавляйте и не удаляйте чужие файлы! Всё содержимое фтп-папки автоматом удаляется 1-го числа каждого месяца. Учитывайте это при длительном хранении файлов.

Cоответствие произведения выбранному жанру (в процентах).

В fb2 книгах можно устанавливать % жанра

prose_contemporary

В вышеуказанном примере указано, что книга соответствует жанру "Современная проза" на 50%.
Теперь, при добавлении книги этот параметр будет учитываться и добавляться в базу. Если % задан (в диапазоне 1-99) , то в списке жанров книги он будет показан сразу за жанром ("Современная проза (50%)").
Изменить % жанра можно на странице редактирования книги в разделе "Жанры". Просто вводим требуемое число перед нужным жанром. Если % не был задан, то по-умолчанию он устанавливается в значение 100%. Это значение не будет показываться в скобках за жанром.

Пример книги с % жанра "Астрономия и Космос" - http://coollib.net/b/336099

В некоторых книгах попадался жанр "Начинающие авторы" (beginning_authors), так что добавил его и к нам (в группу "Прочее") чтобы валидатор не ругался.

Переделана смена языка у книги (в "исправить"). Выбор языка теперь в виде выпадающего списка. Появилась возможность изменить/удалить дополнительный язык и язык оригинала ("Переведена с").

Издательство & Город

Добавлена возможность прописать в книгу издательство и город издания книги. Информация о городе/издательстве из fb2 книг берётся автоматически.
Добавлены страницы со списками городов http://coollib.net/c и издательств http://coollib.net/p
У издательств есть возможность добавить описание с логотипом. Количество созданных описаний сохраняется в личной статистике. (Создано описаний издательства: ...)
Для редактирования этих данных, на странице редактирования книги ("исправить"), сделана отдельная группа полей "Издательство". Группа содержит данные о издательстве, городе и ISBN.
На странице книги добавлены новые поля с ссылками на соответствующие списки книг города/издательства: "Издательство: xxx Город: yyy" (если эти данные прописаны в книге).

Распарсены все ранее добавленные книги и информация из них добавлена в базу. А именно:
- при начальном наполнении библиотеки не всегда прописывался автор. Сейчас все авторы "вытянуты" и прописаны книгам.
- "вытянуты" и прописаны ранее добавленным книгам их ISBN.
- "вытянуты" и прописаны ранее добавленным книгам города/издательства

Информация из "custom-info"

В некоторых fb2 книгах, в теге "custom-info", содержится достаточно ценная информация о книге (художники, редакторы, УДК, ББК и тд.).
Теперь на странице книги, под аннотацией, добавлено сворачиваемое поле "custom-info". В нём содержится информация из соответствующего тега custom-info в fb2 файле (поле показывается если в книге, в custom-info, что-то было прописано).
Старые книги распарсены и custom-info из них записаны в базу. При добавлении новых книг информация из custom-info будет автоматом добавлена в базу.

Добавлен конвертер PDF

Добавлен конвертер pdf и два варианта в список форматов скачивания книги: "pdf A4" и "pdf A6".
A4 - это размер страницы формата A4, книжная ориентация (210 × 297 мм). Должен быть удобен для чтения с ПК или читалок/планшетов с большой диагональю (10+ дюймов).
A6 - это практически формат A6, только немного шире. Книжная ориентация (115 × 148 мм). Должен быть удобен для читалок/планшетов с маленькой диагональю (~6 дюймов).

Показ эпиграфа из книги

Сейчас идёт процесс "выдёргивания" из книг (только fb2 и на русском языке) содержимого из тега (эпиграф). За день-два пройдусь по всей базе книг.
Теперь на странице карточки книги, под аннотацией, будет показан случайный эпиграф из книги (если он есть).
Тег (цитата) из тела книги не берётся т.к. показал тестовый прогон, в этих цитатах ничего толкового нет. А вот в эпиграфах, наверное более чем в 90%, попадаются очень хорошие и умные цитаты "великих".
Вообще получается достаточно внушительный сборник цитат, уже сейчас в базе более 100 000 эпиграфов. В будущем можно будет организовать "цитатник", блок "случайная цитата" или "цитата дня" и т.д.

Лингвистический анализ текста

Сейчас идёт процесс лингво-анализа книг библиотеки. Как пример - анализ 1й книги http://coollib.net/b/1/la
Анализируются книги fb2 на русском языке и размером более 30кб.
На странице карточки книги будут несколько показателей анализа и ссылка на подробный анализ.
Анализ считает символы, слова, буквы, знаки, словарный запас и т.д. Характеристик очень много, в примере можно все увидеть.
В статистике добавился раздел "Лингвистический анализ", где можно отсортировать проанализированные книги по ряду характеристик.
Анализ проводится долго и время анализа книги растёт в геометрической прогрессии в зависимости от размера текста книги. Сейчас обработано чуть более 2500 книг, анализ идёт по-порядку добавления (от id 1).

Дисклеймер
Идея анализа подсмотрена на Фантлабе - https://fantlab.ru/
Анализ словарности и частей речи проводится программой mystem от Яндекса https://tech.yandex.ru/mystem/
Результ анализа не всегда может быть точным т.к. есть множество факторов, которые влияют на это: ошибки в коде, невычитаный текст, криво сделанная книга fb2 и т.д. Всего учесть невозможно.
Я не хочу судить или обидеть авторов. Анализ и рейтинги - это просто цифры, и никак не влияют на любовь читателей. Выводы по анализу пусть каждый делает сам.

Авторы на КулЛиб
(http://coollib.net/authors)
Страница теперь генерируется автоматом. Если пользователь является автором, то прописать его можно так: авторская страница со списком книг -> исправить библиографию -> Известен в библиотеке как -> пишем ник пользователя.

В списках тем форума теперь показывается (в колонках создан и последний ответ) дата создания/ответа и количество дней прошедших от этой даты.

Подправлены списки сериалов. Теперь список не разрывается на показ дополнительных серий книги.

Добавлены новые жанры:

Учебники и пособия ВУЗов (tbg_higher),
Учебники и пособия для среднего и специального образования (tbg_secondary),
Школьные учебники и пособия, рефераты (tbg_school),
Альтернативные науки и научные теории (sci_theories),
Живопись, альбомы, иллюстрированные каталоги (painting),
Искусствоведение (art_criticism),
Мировая художественная культура (art_world_culture),
Фантасмагория, абсурдистская проза (prose_abs),
Приключения в современном мире (adv_modern),
Современная сказка (modern_tale).

Добавлен также один самодельный жанр "Диафильм (diafilm)". Вынесен он в отдельный раздел "Жанры КулЛиб".

Добавлены достижения.

В профиль добавлены достижения за такие действия:
Сделано 1-10000 действий с базой библиотеки;
Добавлено 1-5000 книг в библиотеку;
Создано 1-200 книг;
Оценено 1-2000 книг;
Написано 1-500 отзывов;
Достигнуто 1-500 положительных оценок в отзывах;
Создано 1-500 биографий;
Добавлено 1-200 записей в блог;
Добавлено 1-10000 сообщений на форуме;

Пересчёт достижений делается при посещении страницы профиля.
На форуме, под аватаром пользователя, добавятся "ананасы" медали за его самые значимые достижения.
Достижения сделаны для общей информации о действиях пользователя и просто развлечения. Так что не судите строго

Сравнение книг

Добавлена возможность текстового сравнения книг. Сравнить можно только не заблокированные книги в формате fb2.
ссылка - https://coollib.net/comp
Также добавил ссылку в главном меню (там где новинки, жанры и тд.)
Возможность сравнения есть только у зарегистрированных пользователей.
Функция сделана по подобию сравнения книг на Флибусте.
Не рекомендуется сравнивать книги с большим размером (по несколько мегабайт чистого текста без учёта картинок). Таблица сравнения будет очень большого размера. В 5-10 раз больше исходного размера книги. Т.е. если сравниваются пара книг по ~ 8-9 Мб, то таблица сравнения может иметь размер 50-100 Мб. Загрузка в браузер такой таблицы будет очень долгой. И если слабый ПК, то браузер вообще может "повиснуть"! Если у Вас не безлимитный высокоскоростной интернет и слабое железо, то воздержитесь от сравнения больших книг!

Исправлена ошибка в работе OPDS (вместо книги скачивался пустой файл download.fb2.zip)
Добавлен показ количества страниц в книге.
Показывается кол-во страниц после размера файла (например: "Сафари на Чужого 371K, 88с."). Кол-во страниц будет показываться только у книг над которыми был сделан лингвистический анализ.

Подписка на книги.

Добавлен функционал подписки на новые книги. Теперь можно подписаться на название книги или на автора, и при добавлении нужной книги на сайт получить уведомление.
Функционал доступен в "книжной полке" пункт - "Подписка на книги" (https://coollib.net/polka/sub)
Подписаться на автора можно также на странице автора. В строке добавления биографии/книги появился пункт "(Подписаться на новинки)".
Учтите, что робот будет искать книги только с тем Id автора, на которого подписались. Разные синонимы учитываться не будут. Так что возможно лучше добавить в подписки просто фамилию: например "Жаков". В таком случае неважно к какому автору (Id) будет добавлена книга - проверяться будет только фамилия.
Робот будет проверять новые книги один раз в час. Если найдёт совпадение - отправит Вам на электронную почту уведомление. В подписках (https://coollib.net/polka/sub), в строке шаблона где было совпадение, добавится: "последнее совпадение 11.11.2017 в 11:11, книга {название и ссылка}". Совпавший шаблон будет и дальше проверяться и обновлять, если найдёт новые книги, информацию о совпадении и ссылку на книгу. Если Вы нашли то, что хотели - удалите шаблон (чтобы зря не грузить железо и не получать ненужных уведомлений).