Обсуждение истории последних перипетий Проекта Genesis показало, что не всё общезначимое знание является общеизвестным. А правильно сформулированный вопрос, как известно, содержит бОльшую часть ответа. Причём в современных реалиях даже наличие правильной формулировки вопроса не гарантирует адекватного результата поиска. Сомневающимся могу рекомендовать поискать записи музыки Высотского.
Попробую дать описание культурного феномена.

Update: после того как второй раз припомнился заслуживающий внимания про…пуск, поставил соответствующую метку в заголовке.

Присказка

В информационной проекции эволюции человеческой цивилизации можно выделить пять этапов:

1. Эра устного слова;
2. Появление письменности;
3. Появление книгопечатания;
4. Эпоха массовой грамотности;
5. Отрыв от физического носителя. Последствия резкого падения трудоёмкости доступа к значительной части материалов ещё ждут даже не исследователя, но хотя бы постановки проблемы в научном сообществе.

Аналогичная последнему этапу метаморфоза постигла фотографию: когда кадр стил дорого, предварительная фильтрация обеспечивала достаточно высокую норму выхода. С появлением массовой техники, в рекламе которой заявлялась ненужность специальных знаний и навыков (враньё конечно, но востребованное, которое хотят услышать) и профессиональной доступности массового тиражирования уже обеспечили пресыщение, за которым с стопкой альбомов пришла апатия. Отрыв от физического носителя только усугубил итоговый результат — смотреть и думать что бы напечатать некогда (DDoS обыкновенный), обременять себя культурой надёжного хранения информации дурных нэма, в результате чего уже в среднесрочной перспективе — «шиш».

Официальные сайты учреждений разрабатывались (и разрабатываются) исходя из некоторой собственной логики, не вполне… даже объяснимой с точки зрения народных масс. Например на сайте РГБ в описываемые времена (и как бы не досейчас) только каталог, причём далеко не полностью.

Но есть и положительные подвижки. Например в анонсе от 08.04.2016 (смотрите на даты) РГДБ анонсировала проект по восстановлению диафильмов. Результаты восстановления доступны (правда, не Анонимусу).

На последнем этапе при использовании форматов с изменяемым размером шрифта возникает проблема совместимости с традицией указания ссылок на номер страницы, так как при изменении параметров отображения меняется общее число страниц и смещается текущая (адресуемая). По той же причине обессмысливается и алфавитный указатель. Обратной по направлению и аналогичной по сути тенденцией является практика указания в сносках научных изданий url'ов (пара примеров навскидку из области личных интересов: проблема кодировок, сага о триремщине и Мурз о КИ (в том числе к вопросу надёжности жежешечки)).

Известна гипотеза, согласно которой переход между эпохами обуславливается кризисом информационной ёмкости (приближением накопленной цивилизацией информации к пределу для соответствующей элементной базы). Но нельзя не учитывать о общей тенденции к ускорению времени. Хотя последний этап является очевидным детищем НТП.

С точки зрения значимости для цивилизации порождённая пятым этапом сущность «сетевая библиотека» сравнима с произведением изобретения книгопечатания на массовую грамотность. И тут [внезапно] оказывается, что даже среди старожилов АШ не все знакомы с историей. Полагаю необходимым исправить.

С учётом отмечаемой в последнее время активности господ правоторговцев интересны не столько ссылки, сколько имена проектов, слепки баз [данных] которых можно промыслить на торрентах. А дальше — локальный клиент (например MyRuLib (с учётом физических возможностей разработчика проект просит форка, как вариант — передачи в хорошие руки, ибо есть нехорошее подозрение, что с выпливанием x11-libs/wxGTK:2.* мы его потеряем ☹)) в помощь.

Печальное известие: по пока подтверждаемым только косвенными признаками слухам, использованный проект распространения срезов базы Ф. на торрентах закрыт на ~550 тысяче. Впрочем, это уже не первая жертва.

В своё время был досейчас представляющий некоторую практическую ценность проект Библиотека Траума:

Traum Library (Библиотека Траума) - локальная (то есть предназначенная находиться на жестком диске компьютера, а не в сети) электронная библиотека, появившаяся на рутрекере (тогда еще torrents.ru) в 2008 году путем объединения архива Либрусека c одной из существовавших в то время сборок aldebaran + fictionbook + fenzin. В дальнейшем были обработаны все доступные на трекере сборки и архивы fb2 книг и отслеживались обновления всех основных библиотек в сети. Вероятно, до какого-то момента являлась наиболее полным структурированным собранием доступных в сети fb2-книг на русском и английском языках.

---

История сетевых библиотек

Предварительное замечание:

С точки зрения физиологии восприятия технические предпосылки к компактному и удобочитаемому представлению исправлений (различий двух текстов) появились только в последнюю эпоху (см. man diff, в наглядно-графической форме — [например] dev-util/meld).

Но в рамках общего случая остаётся не то, что не решённая, но даже толком не сформулированная задача контроля аутентичности. Хрестоматийный пример, правда, восходит аж как бы не к доиндустриальной фазе книгоиздания (история каноничного издания «Системы природы» Карла Линнея и посмертной редакторской самодеятельности). Вероятно к тому же корню восходит широко распространённая практика рассылки электронных (!) версий документов (!!) в редактируемых (!!!) форматах.

Здесь же необходимо отметить издержки перехода к индустриальной фазе (слава копроэкономике) с неизбежным следствием в виде стремления к сокращению издержек (в том числе — к экономии на корректуре). Я конечно не располагаю данными по репрезентативной выборке, но в изданиях XIX века опечаток не встречал. При том, что в аналогичной подборке первого десятилетия XX века они уже появились ☹. Привлечение профессиональных (это уже давно — не комплимент квалификации, а совсем наоборот) корректоров привело к «исправлению» опечаток, таковыми не являющихся (например «тектология» → «текстология») и увековеченной рядом (!) изданий очевидной чуши (подумаешь лишняя буковка «I», и в описании событий, явно датирующихся не позднее XVII века появляется ссылка на XVIII век). В последнюю эпоху, помимо усугубления описанных тенденций, проявляется такое отягчающее обстоятельство, как неидеальность качества распознания текста.

Лирическое отступление о форматах

Одной из важных технических предпосылок появления сетевых библиотек была разработка портативных устройств для чтения с экраном типа электронные чернила (e-ink) и как следствие — приемлемой автономностью (на новом аккумуляторе в режиме интенсивного использования — недели). Для первоначальных моделей свойственен размер экрана 6" (габариты примерно соответствуют стандартному книжному формату), разрешение экрана 600х800. Позже появились как более компактные (с экраном 5" и даже ~4") так и более крупные (8", 10"). Успех данного класса устройств заставил подтянуться разработчиков гаджетов с ЖК-экранами. Проблема (или ложка дёгтя) в том, что у подавляющего большинства устройств аккумулятор встраивается (не является штатно-заменяемым расходником, как оно должно быть и как есть [например] в большинстве оконечных устройств сотовой связи).

В форматах поддерживаемых файлов выделяются две группы: масштабируемые и немасштабируемые.

Файлы с текстом в немаштабируемых форматах (pdf, за исключением специально сформированных под электронную книгу с определённым размером экрана) или чисто графическом djvu (что с tiff, который в общем случае с точки зрения пользователя вполне аналогичен djvu — не исследовал) при размере страницы в 1.4х+ раз больше размера экрана читать неудобно даже мне (на зрение не жалуюсь). Что уж говорить о тех, кому для комфортного чтения необходимо увеличить кегль на 2-4 позиции…

Из собственно текстовых форматов первым идёт plain text (только текст, без форматирования, зато с проблемой кодировок, которая на практике «решалась» утверждением инвариантности «стандарта де-факто» cp1251), за ним содержащий некоторые элементы форматирование html (в отрыве от сервера не всегда обеспечивающий корректное отображение текстов на недемократических языках) и в силу закона всемирного тяготения — форматы популярнейшего текстового процессора «мсворд» — doc/rtf (про последний вариант знаю немногим больше заявления поддержки). Для этих форматов уже [в принципе] можно задать размер шрифта.

Следующим этапом эволюции текстовых форматов была формализация, с выделением блока для автоматической каталогизации, логической структуры и стандартных (обязательных) элементов форматирования.

Исторически первым и досейчас популярным в русскоязычном сегменте сети представителем данной группы является основанный на технологии XML (описание и структурирование данных, ориентированное на задачу автоматической обработки) формат электронных книг fb2 (помимо метаданных для автоматичекой каталогизации — логическое структурирование с формированием оглавления, сноски и комментарии, заголовки не включаемые в оглавление, зачёркивание текста, выделение курсивом и полужирным; подробности на заебуке). При этом, XML, насколько мне известно, предполагает строгое требование использования юникода (говорим «юникод», понимаем «UTF8»). Однако буква кириллического алфавита в UTF8 занимает два байта, что прямо-таки провоцирует оптимизаторов размера файла к использованию однобайтовой кодировки. В fb2 внезапно было сделано исключение для cp1251. Но этим дело не ограничилось, у формата обнаружился критический недостаток. В его разработке не участвовали господа правоторговцы. И как следствие — в базовой версии стандарта не было заложено необходимейших фич (условной доступности контента, ключей пользователя и прочая). Расширение конечно зопилили. Но поздно. Как следствие — поддержка не только лишь всеми устройствами.

В качестве решения этой проблемы буржуины попытались зафорсить формат epub, но на просторах одной шестой части суши успеха не имели. Прочие специфичные для конкретного устройства варианты не рассматриваю.

Очевидным образом область применимости всех форматов, предполагающих автоматическое масштабирование, ограничена диапазоном, в котором эта функция даёт приемлемые результаты. То есть ни сложного форматирования (отсутствующие в базовой версии элементы форматирования типа подчёркивания или разрядки реализуются с помощью css-стилей, корректную обработку которых умеют не только лишь все программы чтения; удобочитаемое отображение сносок — снова не только лишь все; реализуемых условий решаемости задачи чтения комментариев не знаю), ни тем более красивых текстовых формул. За подробностями рекомендую обращаться к доктору Кнуту. Если кто-то боится, то можно ограничиться популярным описанием товарища Львовского С.М. (например третье издание, предмет насущной необходимости даже для гуманитариев, о чём подавляющая часть их даже не знает), история доступности бумажного издания печальна ☹, но к вящей печали продавцов блобов — отдано автором в свободное распространение.

Программы для чтения: CoolReader3, OrnamentBook (к вопросу о совершенной «решённости» проблемы кодировок) и прочие.

Пример автоматически сформированного оглавления в правильно структурированном файле (в формате fb2):

Страница с сноской (тоже формат fb2, ЕМНИП единственная из умеющих стандартное отображение программ — CoolRead):

Сказка

Эпоха Творения

Давным-давно, на заре существования Рунета товарищ Мошков вписался за задачу свободного распространения знаний.

Первая, и досейчас известнейшая электронная библиотека — http://lib.ru/

Из недостатков, помимо ограничений со стороны господ правоторговцев — ограниченность ресурсов наполнения и корректировки, практически являющаяся функцией наличного технологического уровня (изначально основной формат — HTML, публичный доступ — только чтение; последнее время местами появилась возможность выгрузки в формате fb2, но те файлы худо-бедно решают только задачу автоматической каталогизации, в части структуры мало отличаясь от plain text).

Обратная связь в основных разделах хромает на обе ноги (известен недавний эпизод, когда «пираты» пытались восполнить пробел (в использованном оригинале отсутствовало несколько страниц) в библиотеке Милитера, насколько отслеживал, реакции не было).

Из проектов товарища Мошкова полагаю необходимым отметить СамИздат (СИ). Первая жертва блокировок книжных ресурсов (старый, ныне блокируемый адрес — zhurnal.lib.ru, в рамках рационализации было бы полезно предложить фиксацию лоббистов с вводом абонентской платы за блокировку ресурсов).

Из аналогов СИ должно отметить портал http://proza.ru/

Примерно в эти же времена, или с небольшим отставанием, буржуины запустили проект Гутенберг.
В котором [вроде бы должна быть] представлена общедоступная классика.

Понадеявшись на это, году так в 2008-м я не стал тягать франкоязычный оригинал (середины позапрошлого века). За что (к вопросу о надёжности активно продвигаемой модели облаков и внешних сервисов) получил облом, когда порядка 2014 года попытался найти тот же текст. Получите (трёхбуквенный результат — «шиш»), распишитесь.

Эпоха Смешения

Порядка 2007 года в рунете уже наблюдалась повышенная активность господ правоторговцев (кто тут давеча говорил, что в 2005-м году копирасты не борзели?).

По каковому поводу у заинтересованного народа возникла обоснованная озабоченность доступностью книг из библиотеки Мошкова (все помнят наблюдения Елены Анатольевны о специфике книжного рынка?).

Ситуация разрешилась появлением библиотеки Либрусек (lib.rus.ec, в дальнейшем — «Л.»), куда в июне 2007 года (скрипт датируется (и ставил дату) 2007-06-12, по дате добавления последнего файла фазы первоначального наполнения — 20.06.2007) в качестве основы фонда было [автоматически, скриптом «LibRusEc kit»] утянуто содержимое библиотеки Мошкова. Базовым форматом библиотеки является fb2, в изначальной реализации помимо чтения (фича, аналогичная изначальной библиотеке Мошкова (последний из индентифицируемых сейчас — #54436, в качестве наглядной иллюстрации к [вроде бы уже почти пять лет] как совершенно «решённой» проблеме кодировок — файлы этого диапазона кодированы в… правильно, cp1251), в Л. доступно только для файлов в базовом формате) предусматривалась возможность скачивания книг, как в базовом формате, так и через модуль экспорта в ряд прочих форматов (txt, rtf… позже добавился epub сотоварищи). Файлы сохранялись (и раздавались) пожатыми в контейнере zip. Движком библиотеки предусматривалась возможность загрузки файлов в произвольном формате. Для автоматической обработки (каталогизации) файлов в нестандартных форматах использовался паллиатив fbd (практически — заголовок fb2 с метаданными, но без содержимого (текстовой части), кладётся в один zip-контейнер с информационным файлом.

Эта библиотека была уже публичной, т.е. добавлять файлы книг и структурировать каталог мог любой пользователь. На основе достижений технологии (цена единицы долговременной памяти) и в целях контроля изменений при «удалении» худшей версии текста удаления файла не производилось (т.е. соответствие номер (или ключ базы) — файл можно считать неизменным). Структурирование каталога производилось по «базарной» модели, когда каждый пользователь независимо руководствуется своими представлениям о правильности, что при коллизии мнений порождало конфликты.

Одной из предначальных библиотек, с которой тексты уносились на Л., является Фензин.

Другим источником оригинального контента является в настоящее время закуклившийся (уходом у глобое подполье) проект Hugo Library.

Опыт эксплуатации данной модели в очередной раз продемонстрировал проблему эволюции сообществ, а также профессионализации.

К той же эпохе следует отнести специализированную поисковую систему http://www.ebdb.ru/ (в настоящее время с учётом активности господ правоторговцев, ресурс представляет скорее историческую ценность) и тематический торрент-трекер booktracker.org

С небольшой задержкой в дополнение к [преимущественно] текстовому проекту «Либрусек» появилась библиотека научной литературы «Генезис» (с конспиративным псевдонимом «Барак старателей»). Первоначальное доменное имя — gen.lib.rus.ec, затем был забег по зеркалам, современная реинкарнация libgen.io, genofond.org

Если не на достигнутом уровне, то в перспективе проект Genesis — сумма (в смысле множеств) РГБ, библиотеки Конгресса США сотоварищи с публично-доступными фондами.

С небольшой задержкой появился ответ от господ правоторговцев — ресурс, в котором можно было «легально» получать электронные версии текстов, выкупленных у авторов (точнее, как правило — представителей авторов, или «правоторговцев»). litres.ru, он же «магазинчик».

Заведение интересно в первую очередь демонстрацией порядочности. В смысле утягиванием в каталог всего, до чего руки дотягиваются. Без обоснования прав владения и продажи. И уже типо «легальной» продажей файлов, зачастую утянутых из «пиратских» библиотек.

По состоянию на конец марта 2016 года эти… деятели смогли присосаться к бюджету (продажей библиотекам бесплатного (!) доступа к каталогу, цензурированному по критерию права продажи, что, возможно, и является одной из первоочередных целей создания ресурса). Почему молчит лехаим?!?

Естественным образом почти сразу проект Либрусек привлёк повышенное внимание со стороны господ правоторговцев.

Несколько лет стойко сопротивлялся, потом начал сдавать и наконец ЕМНИП о позапрошлом годе окончательно сдался (и перешёл под контроль правоторговцев).

Этапы падения: реклама (включая стороннюю pop-up), притеснения Анонимуса (загрузка файлов только регистрантами), кармадрочество (притеснения уже регистрантов — вымогательство нанесения «пользы» в лучших традициях индусского кода, с венцом в виде «денег дай» посредством несертифицированной биллинговой системы).

Эпоха Разделения

Во времена упадка, накануне Падения, у проекта Л. закономернейшим образом появились форки. Тем более, что по крайней мере первое время API выгрузки обновлений вполне работал. Некоторые из них, пройдя жизненный цикл, к настоящему времени умерли (смотри например read-only зеркало Л. на Кокосах — lib.ololo.cc (доменное имя живёт, и даже web-сервер запущен, можно развлечься чтением цитат), другое зеркало (?) — biblioteka.cc постигла иная судьба, ныне ресурс заблокирован), но один из них 30.11.2009 переродился в полноценный и самостоятельный проект.

Это известная (или даже известнейшая) современная сетевая библиотека, почти знамя «пиратов» — «Флибуста» (далее — «Ф.»). Первый загруженный изначально предусмотренным образом, после выключения режима синхронизации, текст — #173909 (по состоянию на момент написания статьи количество файлов в каталоге ~440 тысяч). Эволюция доменных имён: [{proxy,www}.]flibusta.net (ныне заблокирован) → flibusta.me → flibusta.is с выходом в «даркнет»: www.flibusta.lib (нестандартное расширение списка корневых зон lib обеспечивается проектом OpenNIC, список мастеров зоны можно посмотреть [например] здесь (сцылко может не работать, по состоянию на апрель 2016 местами зопилили поддержку DNSCrypt)) || flibusta.i2p (домашняя страница проекта i2p), демократично-централизованный тор опускаю). Также реализована чисто–каталожная версия, без доступа к текстам — http://flisland.net

В случае блокировки действующего значения «белого» имени рекомендуется посмотреть что нового пишут на внешнем форуме. Также заявляется трансляция новостей в твиторе, но господа правоторговцы в курсе и уже решают эту проблему (возможно что уже и решили).

Начиная с момента активного интереса со стороны господ правоторговцев доступ неавторизованных пользователей к конвертеру закрыли. Для Анонимуса скачивание файлов доступно только в базовом формате (с фильтрами экспорта в epub и mobi). В последнее время по мотивам блокировок ресурса по крайней мере на некоторых маршрутах запрещается доступ к «бестселлерам» (улицкая/донцова/…), с формулировкой «Доступ к книге ограничен по требованию правоторговца». По мне — правильно делают. Написание, а сугубо распространение коммерческого худ.лита должно вознаграждаться по нормам уголовного кодекса.

После оформления Ф. в самостоятельный проект (или раскола) часть сообщества сохраняла верность привычному знамени (Л.). Когда основатель Либрусека окончательно сдался, они предпочли замутить свой проект — maxima-library.org (проект запущен 3 июня 2013, тоже неактивной ссылкой, потому что дешёвой популярности не нужно).

Ниша сетевой библиотеки оказалась достаточно ёмкой.

В настоящее время (по состоянию на 7524 год) в ней живёт достаточно много проектов, с фондами, [уже] относительно независимыми от прародителей (потому что задача асинхронного согласования распределённой базы данных, с записью по принципу multi-master (помимо двух, нет, уже трёх основных, проекты Мошкова тоже живут и пополняются), мягко говоря весьма нетривиальна). Например из регулярно упоминаемого на АШ — royallib.com. Сюда же отмечу тот факт, что для живущих с продажи трафика мутных отражений свойственно раздавать архивы, в которых к исходному файлу приложен rtf.

Но это уже другая история…

---

Пользуясь случаем хочу поинтересоваться: нет ли тут заинтересованных (в красивой теме) знатоков французского языка. С учётом оценки трудоёмкости — лучше студентов, специализирующихся по французскому языку.