爱意满满的作品展示区。
OysterQAQ

Pixivic.com 一个免费 Pixiv 高级会员搜索的站点 3.0

  •  2
     
  •   OysterQAQ ·
    OysterQAQ · Oct 27, 2019 · 22909 views
    This topic created in 2563 days ago, the information mentioned may be changed or developed.

    前言

    时间如白驹过隙(没有什么文化,感慨的话说不出来),距离1.0发布已有一年,对我来说,3.0与之前最大变化可能是自己终于能从前后都写的境地中解放出来:)(有三个咸鱼前端开发老哥,春招一起找工作认识的网友,以后应该能发展成线下的好朋友)。

    以下仅仅是后端发布上线,前端正在开发中(预计十一月底或者十二月上线)

    About Code

    架构图

    Bright Point

    • 基于注解的基础设施模块
    • 基于ElasticSearch的近实时搜索
    • 基于Logstash的同步
    • 基于JDK 11的Httpclient
    • Restful API

    About Feature

    检索

    • 根据画师 id 检索画师
    • 根据画作 id 检索画作详情
    • 依赖于saucenao的以图搜图
    • 依赖于Pixiv的相关性 tag
    • 依赖于Pixiv的搜索词自动补全
    • 依赖于百科的搜索词->词条的尝试(搜索建议)
    • 多关键词搜索(空格切分)
    • 自动翻译
    • 更高的定制性(长宽、画作类型、创建时间等)

    排行

    • 日、周、月排行的查看

    spotlight

    • spotlight 主题画辑的查看

    ACG 资讯

    • 集合资讯查看

    Common

    • 用户模块
    • 收藏画作
    • follow 画师
    • 查看画师画作
    • 给画作添加 Tag(暂未实现)
    • 用户行为追踪与还原(时间轴)、支持自定义书签(备份点)(暂未实现)
    • 喜爱画作分享到社群
    Supplement 1  ·  Oct 28, 2019
    被人恶意搜索政治有害图片举报,暂时关闭,处理敏感词汇搜索
    Supplement 2  ·  Oct 28, 2019
    除了承诺开放的 api 外,以上 api 未来可能会开启权限控制,将会针对用户来进行流量控制,未登录将不能使用
    50 replies  •  2022-06-22 23:29:27 +08:00
    yaohege
    yaohege
    Oct 27, 2019 via Android
    1
    前排膜拜
    0o0O0o0O0o
    0o0O0o0O0o
    Oct 27, 2019 via iPhone
    2
    感谢。

    记得 2.0 的时候有个随机图片的 API,3.0 的文档里没看见
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019
    3
    @0o0O0o0O0o 还未开发完毕,现在的做法效率太差,等开发完毕了会单独发布供大家使用
    X2031
    X2031
    Oct 27, 2019
    4
    老哥这个站 备案 不太安全吧
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019 via iPhone
    5
    @X2031 都是绿色内容啊🐶
    X2031
    X2031
    Oct 27, 2019
    6
    @OysterQAQ 有点道理。 之前做个类似的站点,迫于成本和盈利模式 。后来放弃~
    Darkside
    Darkside
    Oct 27, 2019
    7
    已收藏,估计会推荐给同学用,感谢您的创作!
    Babylon27
    Babylon27
    Oct 27, 2019 via iPhone
    8
    感谢分享
    ShinomiyaKaguya
    ShinomiyaKaguya
    Oct 27, 2019
    9
    支持,希望
    cairnechen
    cairnechen
    Oct 27, 2019
    10
    哇,今天刚想找一个能搜索 Pixiv 的工具,好巧,感谢,支持!
    dcalsky
    dcalsky
    Oct 27, 2019 via Android
    11
    如何盈利?没看见广告
    ashine
    ashine
    Oct 27, 2019
    12
    可以申请一波友链吗? https://gal.voiux.com
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019 via iPhone
    13
    @dcalsky 暂时没有盈利模式,明年再考虑是在瀑布流中像 pinterest 那种插入广告还是高级功能订阅
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019 via iPhone
    14
    @ashine 可以呀,参考我们友链的格式给出
    mokeyjay
    mokeyjay
    Oct 27, 2019
    15
    好强啊,赞
    digimoon
    digimoon
    Oct 27, 2019
    16
    能不能在搜索结果的那堆小图里加入跳转到 pixiv 原页面的功能?真的好慢啊
    RicardoY
    RicardoY
    Oct 27, 2019 via Android
    17
    这个网站真是越做越好了...在群里一些年纪小的爱好者已经不知 pixiv 只知 pixivic 了
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019 via iPhone
    18
    @digimoon 有的,点击大图就会跳
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019 via iPhone
    19
    @RicardoY 惶恐
    digimoon
    digimoon
    Oct 27, 2019
    20
    @OysterQAQ 就是因为大图太慢了,要刷出占位才能点,经常性刷不出
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019
    21
    @digimoon 到时候让前端安排一下
    wzw
    wzw
    Oct 27, 2019
    22
    想知道你的架构图 用什么画的, 很好看
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019❤️1
    23
    @wzw 哈哈哈每次都有人问,是 xmind zen
    echopan
    echopan
    Oct 27, 2019
    24
    膜拜大神,求扩列
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019
    25
    @echopan 不是大佬 可以加我的一个程序员小群,里面都是今年六月毕业的朋友,群号 963551053
    chainmon
    chainmon
    Oct 27, 2019 via Android
    26
    大佬的 intro 页居然是我的模板,荣幸啊
    https://github.com/nexmoe/single-page/blob/master/README.md#mixcm-avatar
    OysterQAQ
    OysterQAQ
    OP
    Oct 27, 2019
    27
    @chainmon 你的时间轴非常简约好看~
    Caturra
    Caturra
    Oct 27, 2019
    28
    不错的站点,不过火狐似乎用不了?
    echisan
    echisan
    Oct 28, 2019 via iPhone
    29
    🐛
    Simcentric
    Simcentric
    Oct 28, 2019
    30
    膜拜大神
    98jiang
    98jiang
    Oct 28, 2019
    31
    用过几次,支持~
    deathscythe
    deathscythe
    Oct 28, 2019
    32
    P 站呢,一直存图一直推荐,每张都好看, 停不下来啊 /滑稽 /手动狗头
    mouyase
    mouyase
    Oct 28, 2019 via Android
    33
    居然突然就发新版了…
    OysterQAQ
    OysterQAQ
    OP
    Oct 28, 2019
    34
    @mouyase 不突然了,一年了都
    dapang1221
    dapang1221
    Oct 28, 2019
    35
    泼个冷水…我几年前爬过 pixiv 数据,那时候用 api 爬还很好用,爬了大概几天的增量之后,我就发现一个问题


    还不如不直接买个高级会员的账号,拿到登录态,再把所有搜索请求转发过去了……
    dapang1221
    dapang1221
    Oct 28, 2019
    36
    补充一哈,其实还不是只爬增量就够了,相当于每一次更新都是爬全量,因为每个图的收藏数和 tag 都是在变化的…当时搞了个分布式的爬虫,虽然没几个节点。搜索用的是 sphinx
    OysterQAQ
    OysterQAQ
    OP
    Oct 28, 2019
    37
    @dapang1221 实际上 1.0 版本就是转发请求实现。。。但是并发上去会被封账号,增量当然是要基于全量的基础上做增量,这东西挺敏感的,不说太说了
    6IbA2bj5ip3tK49j
    6IbA2bj5ip3tK49j
    Oct 28, 2019
    38
    真厉害
    数据库 mariaDB+redis,es 做搜索
    Springboot
    前面套了一个 cdn
    能画成这样,不去做架构师真的屈才了。
    OysterQAQ
    OysterQAQ
    OP
    Oct 28, 2019 via iPhone
    39
    @xgfan 👍🏻
    OysterQAQ
    OysterQAQ
    OP
    Oct 28, 2019 via iPhone
    41
    @aver4vex 级别需要在限制一下
    OysterQAQ
    OysterQAQ
    OP
    Oct 28, 2019
    42
    @aver4vex 能提供搜索词吗 我看看级别
    aaaaaaaaa
    aaaaaaaaa
    Oct 28, 2019
    43
    原来 zen 还能画成这样,感谢
    aaaaaaaaa
    aaaaaaaaa
    Oct 28, 2019
    44
    请问下 logstash 的相关配置是不是没上传到 GitHub ?
    OysterQAQ
    OysterQAQ
    OP
    Oct 28, 2019
    45
    @aaaaaaaaa 是的,挺简单的只是配置一下输入输出,后续有需要会上传
    duola
    duola
    Oct 29, 2019
    46
    之前我好像记得你图存在又拍云的。
    OysterQAQ
    OysterQAQ
    OP
    Oct 29, 2019 via iPhone
    47
    @duola 没有的,哪存的起,都是反代图片,
    clemmsen
    clemmsen
    Oct 29, 2019
    48
    你问我资瓷不资瓷,我是资瓷的,只是这种很容易被人恶意针对
    OysterQAQ
    OysterQAQ
    OP
    Oct 29, 2019
    49
    @clemmsen 资瓷就完事了,敏感词过滤提上日程
    chackchackGO
    chackchackGO
    Jun 22, 2022
    50
    如今怎样了?项目地址 404 且主页功能几乎尽失
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   5330 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 119ms · UTC 01:25 · PVG 09:25 · LAX 17:25 · JFK 20:25
    ♥ Do have faith in what you're doing.