Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

新版(浏览器插件版)计划支持站点讨论(持续更新) #616

Open
yingziwu opened this issue Mar 5, 2024 · 2 comments
Open
Assignees

Comments

@yingziwu
Copy link
Collaborator

yingziwu commented Mar 5, 2024

在这里记录一下,关于新版(浏览器插件版)支持站点的一些想法。

按照优先级分为 Level 0、Level 1 等若干个级别,数字越大优先度越低。

未列的站点为优先级太低暂时不考虑。

Level 0

pixiv

网址:https://www.pixiv.net/en/

支持的理由:

  • 最近经常在 pixiv 上看小说
  • pixiv 前后分离做的特别好,打开网页 F12 就可以看到具体的 API 请求,无需额外解析,方便写代码
  • pixiv 可以用来实践一些新功能,比如说 rate limit 。

Level 1

SF轻小说

网址:https://book.sfacg.com/

支持的理由:

  • APP API 已经有项目给出了
  • 代码已经完成了很大一部分
  • 自己偶尔在上面看书

可能的困难:

  • SFACG 似乎只允许一个 Session 存活

刺猬猫(欢乐书客)

网址:https://ciweimao.com/

支持的理由:

  • APP API 已经有项目给出了
  • 自己有几本正在追的书在上面

晋江文学城

网址:https://www.jjwxc.net/

支持的理由:

  • 自己有正在追的书在上面
  • 周围有好友在用小说下载器下载晋江小说
  • 网页版字体加密有一定前期基础
  • APP API 部分解明

可能的困难:

  • 晋江文学城 APP API 抓包遇到了问题,MITM 后无法正常创建连接,会被服务端关闭
  • APP 登录逻辑仍然不清楚 (loginPasswordsignidentifiersJPushRegistrationID 等url参数生成方式不明)
  • APP API 请求中 signAPPDEVICESMDeviceID 请求头生成方式不明,虽然好像不带这几个请求头也可以得到相应的响应。
  • APP API VIP 章节最近好像更换了加密方式,但似乎已经被 @ldm2060 修复 修复晋江文学城 token渠道下载 #613 了?

相关 issue:#251 #567 #586 #592 #599 #614

真白萌

网址:https://masiro.me/

支持的理由:

  • 经常在上面看书

可能的困难:

  • 非常严格的频率限制
  • 阅读设置中诸如 “去除默认样式”、“繁简切换” 这类设置对抓取的影响。
  • 登录墙?

相关 issue: #604 #504

Level 2

轻之国度

网址:https://www.lightnovel.us/

支持的理由:

  • 对 APP API 已经有一定的研究
  • 偶尔会上去看书

相关 issue:#277 #601

笔趣阁类站点抓取规则生成器

示例站点:https://www.2biquw.com/

支持的理由:

  • 被广泛应用的转载网站模版

可能的问题:

  • 站点虽然大同,但多多少少会有小异
  • 移动端抓取问题,移动端版式更多

全本同人小说类站点抓取规则生成器

示例站点:https://www.qbtr.me/

支持的理由:

  • 同样的被广泛应用的转载网站模版(ACGN小说多见)

可能的问题:大致同笔趣阁

UU看书

网址:https://www.uuks.org/

支持的理由:

  • 非常全面的起点小说转载网站
  • 有前期基础

和图书

网址:https://www.hetushu.com/

支持的理由:

  • 非常高质量的转载网站
  • 有前期基础

Level 3

长佩文学

网址:https://www.gongzicp.com/

海棠文化线上文学城

网址:https://ebook.longmabook.com/

米国度

网址:https://www.myrics.com/

废文网

网址:https://sosad.fun/

Level 4

小説家になろう

网址:https://syosetu.com/

カクヨム

网址:https://kakuyomu.jp/

ハーメルン

网址:https://syosetu.org/

@yingziwu yingziwu self-assigned this Mar 5, 2024
@yingziwu yingziwu pinned this issue Mar 5, 2024
@abdd22
Copy link

abdd22 commented Dec 5, 2024

我个人的一点想法

T0:bilibili(包括漫画)、Readmoo(同B站)等同类型的网站。理由:全部都是自己付了真金白银的,现在就在靠这个抓epub出来,只有抓出epub,我们才有可能把更多的书分享给大家。

T1:轻之国度(中文主流,如果你不想去T0站点掏钱,那就只能去LK看看了,至少不用掏钱)、真白萌(第二位,不如LK)、esjzone(日翻主阵地之一)

T2:小説家になろう、カクヨム、Pixiv、ハーメルン(排名分先后,小说家和カクヨム才是日区主流,而Pixiv只是简单而已,作品数量与质量是不及的)

其他后面任意(轻小说类本人只看日系,对国内网红文学流是直接敬谢不敏的。否则就是读英美的主流小说,或者读传记类、半自传、纪实报告文学这种东西了)

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
Status: No status
Development

No branches or pull requests

3 participants