NAS玩机十一年高阶玩家教程系列其四:Calibre、虚拟机以及杂志《经济学人》抓取

2019-12-15 20:01:29 73点赞 455收藏 38评论

NAS玩机第十一年,高阶玩家教程系列预告(软件目录)

【NAS玩机十一年高阶玩家教程系列其一:Bitwarden】

【NAS玩机十一年高阶玩家教程系列其二:Wallabag 网页剪辑器】

【NAS玩机十一年高阶玩家教程系列其三:Shaarli 全平台书签管理器】


系列大纲领【敲黑板】

此系列所有服务的安装和使用,除了 wallabag、bitwarden 以外都不必须公网IP要求,搭建在局域网在局域网环境内使用OK,有能力内网穿透的也能从外网访问。教程设计docker的部分全程使用命令行。
原因:简单、快速、具有100%可还原性。

  刚开始的时候可能你会觉得难受,毕竟长这么大敲命令行的时间加起来都没有半个小时,但是当你需要更新容器时,当升级换机时,复制粘贴几行代码,等待结束后无缝使用的体验,可比在docker套件里面点来点去保证设置不出错的感觉好太多了!

  上菜了,群晖官网教程如何通过 SSH/Telnet 用 root 权限登录 DSM

  这两天文章没啥流量,更新动力不足。。。Calibre相关部署工程量太大了,看下来的朋友订阅、收藏、点赞、转发点起来好吧?这么良心的更新拿出来白票了,你们心不痛的吗……


喜欢电子书的朋友不看此篇绝对是重大损失!

应用介绍:

  Calibre我就不介绍了,绝对的电子书管理神器。但是我收藏了一堆书,看书找书的时间还是远远多过管理书的时间。能不能有个像书架那样的展示柜?不想每次找书都要打开电脑去开那个无比臃肿的calibre怎么办?
  当当当当~~~ Calibre-web 横空出世了。把它理解为图书展示柜就好了,它的定位就是这个【千万不要想着从这里添加书本或者修改书本】,calibre是个多臃肿的软件,让小巧的calibre-web干那些事情真的是难为它的,把它当展示器就好了。

NAS玩机十一年高阶玩家教程系列其四:Calibre、虚拟机以及杂志《经济学人》抓取

NAS玩机十一年高阶玩家教程系列其四:Calibre、虚拟机以及杂志《经济学人》抓取

  能直接推送到kindle
  能直接下载
  除mobi之外的电子书格式都能在线阅读
  支持opds书库的软件能直接添加为opds书库

NAS玩机十一年高阶玩家教程系列其四:Calibre、虚拟机以及杂志《经济学人》抓取

部署

mkdir /volume1/docker/calibre && /volume1/eBooks/CalibreWeb && docker pull linuxserver/calibre-web:latest && docker run -d --name=Calibre-web -p 8084:8083 -v /volume1/docker/Calibre:/config -v /volume1/eBooks/CalibreWeb:/books --restart always linuxserver/calibre-web

等待成功提示,登录内网ip:8084 登录
账户 admin
密码 admin123

说明

/volume1/docker/calibre 为calibre-web配置资料存放路径
/volume1/eBooks/CalibreWeb 为calibre书库数据库文件以及电子书存放目录

注意

请设置好 /volume1/eBooks/CalibreWeb 目录权限为everyone ;第一次登陆calibre-web设置书库路径为/books ;设置里可更改UI为中文。

使用说明

1、在PC上安装calibre【点我下载】
2、把你所有的藏书都添加到pc版calibre中,做好各种编辑、简介、分类工作,达到完善。
3、打开书库所在路径(在calibre中随便右键一本书 --> 打开所在目录 --> 往上2级目录 --> 看到 metadata.db 这就是书库主目录了)
4、全选主目录中的所有文件与目录,把所有文件、文件夹都剪切粘贴到 NAS /volume1/eBooks/CalibreWeb 目录下
5、用webdav把 /volume1/eBooks/CalibreWeb 映射到PC作为本地盘 【群晖套件中心下载webdav服务器,具体用法请自行搜索】
6、在calibre中切换书库为 /volume1/eBooks/CalibreWeb 映射的本地盘

至此,calibre PC 版 与 calibre-web 就完成了书库共享。
达成了 calibre PC 管理书本、calibre-web 展示书本的目的。

注意

书库共享是个危险行为,在修改书库的同时浏览calibre-web可能会造成metadata.db数据库不可逆损坏,建议每次修改书目或者添加删减后,关闭calibre pc版,马上做一个 metadata.db 文件的增量备份。如果觉得calibre pc版臃肿,以下介绍一个更安全的添加书本到书库的方法:命令行

在windows中打开cmd
calibredb add --with-library e: d:booknew -1
calibredb add --with-library e: d:bookxxxx.epub

代码说明

  e: 是 /volume1/eBooks/CalibreWeb 映射到本机的盘符,根据你的实际情况修改。
  d:booknew -1 表示你有一本书(比如《狂人日记》)有2种格式:狂人日记.mobi、狂人日记.epub都存放在new文件夹下,而想把她们存为同一本书,在calibre中显示如下

NAS玩机十一年高阶玩家教程系列其四:Calibre、虚拟机以及杂志《经济学人》抓取

calibredb add --with-library e: d:bookxxxx.epub 这就表示直接把d:book目录下的 xxxx.epub 这本单独的书添加到书库


定时自动抓取新闻、杂志,并添加到书库中

  因为我自己的常规书库有藏书1000+,而自动抓取新闻几乎每天都有更新,所以实际上是架设了2个 calibre-web ,不让新闻杂志跟常规数目混合起来。
  由于docker套件中的linux系统的各种限制,导致了定时任务crontab无法在docker容器中顺利运行;又因为后期教程matrix要运行在正常的centos7系统中,所以本期就一并说明用虚拟机在群晖中安装centos7系统。

群晖安装CentOS7虚拟机

1、先下载虚拟机套件 Virtualization 【点我进入官方通道
2、群晖套件中心-->手动安装-->上传安装Virtualization-x86_64-2.5.0-9432.spk
注意:至少有一个硬盘要是 btrfs 格式,后期才能正常安装虚拟机
3、下载centos7 系统 【点我进入官方通道
4、安装完成的 Virtual Machine Manager 套件打开,新增 Linux 系统,选择上面下载的centos7的ISO文件
5、等待,设置用户名密码。完成
6、在 Virtual Machine Manager 套件中打开【连接】,连接到centos7命令行

安装一些必要的软件以及必要的设置

1、虚拟机下CentOS7安装并开启SSH连接
2、虚拟机下CentOS7安装nfs的挂载等支持: yum install -y nfs-utils wget
3、群晖中打开 控制面板-->文件服务-->NFS打勾;控制面板-->共享文件夹-->选择ebook书库所在文件夹-->编辑-->NFS权限-->新增如下

NAS玩机十一年高阶玩家教程系列其四:Calibre、虚拟机以及杂志《经济学人》抓取

在CentOS7中安装calibre

sudo -v && sudo calibre-uninstall && wget -nv -O- https://download.calibre-ebook.com/linux-installer.sh | sudo sh /dev/stdin version=3.48.0

在群晖里面部署一个专门展示新闻、杂志的calibre-web书库

mkdir /volume1/docker/magazine && /volume1/eBooks/magazine && docker pull linuxserver/calibre-web:latest && docker run -d --name=Calibre-magazine -p 8090:8083 -v /volume1/docker/magazine:/config -v /volume1/eBooks/magazine:/books --restart always linuxserver/calibre-web

为了方便管理,在CentOS7中映射2个文件夹到NAS上

其一:

mount -t nfs NAS内网IP地址:/NAS随便一个文件夹的路径 /centos7随便一个文件夹路径(为了方便centos7与nas交换数据)
如:
mount -t nfs 192.168.8.166:/volume2/Downloads/complete /mycentos

其二:

mount -t nfs 192.168.8.166:/volume1/eBooks/magazine/ /home/username/calibre/
挂载了centos7中的calibre书库目录与calibre-web-magazine的书库目录

设置开机自动挂载目录:

编辑/etc/fstab
vi /etc/fstab
追加:
INS键进入编辑模式,在最后面添加与下面2行相符与你自己机器的内容
192.168.8.166:/volume2/Downloads/complete /mycentos/ nfs rw,tcp,intr 0 1
192.168.8.166:/volume1/eBooks/magazine/ /home/username/calibre/ nfs rw,tcp,intr 0 1
按ESC键退出编辑,键入:wq回车保存
【切记被挂载的服务端需要改权限】

是否挂载成功可以通过以下命令查看
showmount -e NAS内网IP地址

实操在centos中设置定时抓取新闻杂志任务并添加到calibre-web中展示

A、新增抓取经济学人任务 【请注意点我打开后代码中的注释说明】

1、在 /volume1/eBooks/magazine/ 下新建文件夹 recipes
2、进入 recipes ,新建文本文档并重命名为 Economist.recipe
3、将这里的代码【点我打开】复制粘贴到 Economist.recipe 中
4、进入 recipes ,新建文本文档并重命名为 economist.sh
5、将这里的代码【点我打开】复制粘贴到 economist.sh 中
6、连接进入centos7命令行模式,进入 /home/username/calibre/recipes ,运行 sh economist.sh
7、访问nas内网IP:8090 看是否运行成功
8、连接进入centos7命令行模式,设置定时任务:
cd /etc && crontab -e
INS键进入编辑模式,在最后面添加与下面1行相符与你自己机器的内容
00 9 * * 6 /home/username/calibre/recipes/economist.sh
表示每星期六上午9点自动执行任务
按ESC键退出编辑,键入:wq回车保存

B、新增自定义每日新闻任务 【请注意点我打开后代码中的注释说明】

1、进入 recipes ,新建文本文档并重命名为 Daily.recipe
2、将这里的代码【点我打开】复制粘贴到 Daily.recipe 中
3、进入 recipes ,新建文本文档并重命名为 daily.sh
4、将这里的代码【点我打开】复制粘贴到 daily.sh 中
5、下载喜欢的图片作为daily的封面图,存放在 /volume1/eBooks/magazine/recipes 路径下,记住文件名,并在 Daily.recipe 中代码底部做相应修改。
6、Daily.recipe 中可自定义你所想阅读的rss源,源的标题会被抓取为电子书目录,recipe代码中标题为中文的要全部转换为unicode码【点我打开】在线中文转换unicode码
【我的Daily.recipe中一大半rss源是自己架设的rsshub中抓取的,别人不可用,请自行寻找可用源,或等rsshub的教程】

7、若想测试修改后的 Daily.recipe 有没有错误:
把自行修改后的Daily.recipe 文本内容全选复制 ---> 打开 calibre pc版 ---> 点击大图标【抓取新闻】旁边的小箭头 ---> 添加自定义新闻来源 ---> 自定义内置订阅清单 ---> 随便选一个,确定 ---> ctrl+a 全选 ---> 粘贴 ---> 保存
如果不报错,说明格式上没有错误,接着往下走,正常情况能正常使用;如果报错了,再看具体原因解决(很可能是中文转换unicode码这一步没做好)

8、连接进入centos7命令行模式,进入 /home/username/calibre/recipes ,运行 sh daily.sh
9、访问nas内网IP:8090 看是否运行成功
10、连接进入centos7命令行模式,设置定时任务:
cd /etc && crontab -e
INS键进入编辑模式,在最后面添加与下面1行相符与你自己机器的内容
00 23 * * * /home/xx7q9h/calibre/custom_recipes/daily.sh
表示每天23:00自动执行任务
按ESC键退出编辑,键入:wq回车保存

此命令可查看当前设置成功的定时任务
crontab -u root -l

更多定时任务说明


10 1 * * 6,0 /usr/local/etc/rc.d/lighttpd restart
每周六、周日的1 : 10 重启apache

0,30 18-23 * * * /usr/local/etc/rc.d/lighttpd restart
上面的例子表示在每天18 : 00至23 : 00之间每隔30分钟重启apache

0 23 * * 6 /usr/local/etc/rc.d/lighttpd restart
上面的例子表示每星期六的11 : 00 pm重启apache

* */1 * * * /usr/local/etc/rc.d/lighttpd restart
每一小时重启apache

* 23-7/1 * * * /usr/local/etc/rc.d/lighttpd restart
晚上11点到早上7点之间,每隔一小时重启apache

0 11 4 * mon-wed /usr/local/etc/rc.d/lighttpd restart
每月的4号与每周一到周三的11点重启apache

0 4 1 jan * /usr/local/etc/rc.d/lighttpd restart
一月一号的4点重启apache



ENJOY


NAS玩机十一年高阶玩家教程系列其四:Calibre、虚拟机以及杂志《经济学人》抓取


展开 收起
38评论

  • 精彩
  • 最新
  • 我觉得app应用每人的需求不同,好比你列的清单中我大概也就bitwarden对我有用。要不你把重点放在各种app的就用场景和好处上,而不是安装过程。或者讲讲nas面临的许多实际问题,比如大量的数据或配置如何备份,内网穿透下各应用的端口与域名甚至证书的等

    校验提示文案

    提交
    我哪篇没写应用场景跟好处了?我重点讲的都是应用场景跟好处啊!

    数据备份配置穿透这种小白问题我每一篇文章开头都说了请自行搜索,就别为难我了吧。。。

    校验提示文案

    提交
    你那些太低级了 看别人的教程不行吗

    校验提示文案

    提交
    还有3条回复
    收起所有回复
  • 你回错我了 [皱眉] 层主说得那些备份内穿真的太低级了 这个教程不适合层主

    校验提示文案

    提交
    sorry,我在后台看的,没看到上下文。

    校验提示文案

    提交
    收起所有回复
  • 有没有 可以管理txt格式的 然后可以对接手机app的

    校验提示文案

    提交
    这个可以用来管理各种电子书格式,txt没问题。手机app你可以找找任何支持添加自定义opds书库的电子书app,我就知道一个静读天下。

    校验提示文案

    提交
    哦哦 谢谢大佬解惑 感谢

    校验提示文案

    提交
    收起所有回复
  • 写的不错,不过怎么从二直接跳到四了?三呢?

    校验提示文案

    提交
    三迷路了。

    校验提示文案

    提交
    收起所有回复
  • 请教一下,这个DOCKER上的书库除了可以展示藏书还能用来做什么?向设备推送书籍?移动设备远程查看书籍?

    校验提示文案

    提交
    朋友,文章里写的这么详细这几个问题都有答案你还特地来问。。。

    校验提示文案

    提交
    收起所有回复
  • WEB版可以从网络上更新书籍元数据吗?还是说要通过电脑版更新元数据然后导入到WEB版才能显示?

    校验提示文案

    提交
    通过电脑版更新元数据然后导入到WEB版

    校验提示文案

    提交
    收起所有回复
  • 大佬大佬,看这里看这里~~~~
    我家里是群晖920,按您的方法装好PC客户端,然后拷贝到群晖里,正常,WEB页也正常,单位电脑安装客户端 ,也正常。
    然后问题来了,我单位电脑重装过了系统,自然也就重装了客户端,现在就提示我数据库损坏,需要修复,我 11G的书,修复了一天一夜都不行,我现在该怎么办,家里客户端和WEB网页打开书库没有任何问题啊。。。。。

    校验提示文案

    提交
    我应该在文章里面说过,不要几个设备接入管理calibre,容易数据库损坏。而且最好每次操作完关闭calibre后都要备份一下.d***据库文件。修复是修复不了的了,还是重新导入吧。跟多少G的书没关系,我的书有50G,但是数据库只有16mb。数据库只是书本位置信息简介的索引。

    校验提示文案

    提交
    [赞一个] [赞一个] [赞一个] 大佬 也就是说 calibre还可以容纳更多的书,这个和电脑硬件关系不大?如果有,那是最关联cpu还是内存啊

    校验提示文案

    提交
    还有2条回复
    收起所有回复
  • 作者写的辛苦。希望能有同需求的伙伴出现 [喜极而泣] 感觉好孤独的技术爱好者

    校验提示文案

    提交
  • 玩nas到后面其实是玩Linux了

    校验提示文案

    提交
  • 想问一下楼主 抓取经济学人失败是怎么回事

    校验提示文案

    提交
  • 配置时,基本配置书库配置输入/books时显示DB Location is not Valid, Please Enter Correct Path。怎么回事

    校验提示文案

    提交
  • 等有空再看 [皱眉] [皱眉] [皱眉]

    校验提示文案

    提交
  • 码字不易.~帮顶~

    校验提示文案

    提交
  • 感谢分享 打赏了

    校验提示文案

    提交
  • 经验好文,继续打赏。

    校验提示文案

    提交
  • 可惜我的没docker,哎

    校验提示文案

    提交
  • 我之前用calibre加花生壳内网穿透搞了一个小型个人图书馆,kindle外网访问直接可以下载很方便,但是发现自己根本懒得去看,就关了。

    校验提示文案

    提交
  • 感谢分享,在后台抓取新闻并添加到数据库的时候浏览网页是不是也会造成数据库的破坏呀,我遇到过500 server error,数据库变成只读了。

    校验提示文案

    提交
  • 如果直接利用pc版的web分享功能行不行

    校验提示文案

    提交
  • 大佬大佬,看这里看这里~~~~
    我家里是群晖920,按您的方法装好PC客户端,然后拷贝到群晖里,正常,WEB页也正常,单位电脑安装客户端 ,也正常。

    校验提示文案

    提交
提示信息

取消
确认
评论举报

相关文章推荐

更多精彩文章
更多精彩文章
最新文章 热门文章
455
扫一下,分享更方便,购买更轻松