V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
这是一个专门讨论 idea 的地方。

每个人的时间,资源是有限的,有的时候你或许能够想到很多 idea,但是由于现实的限制,却并不是所有的 idea 都能够成为现实。

那这个时候,不妨可以把那些 idea 分享出来,启发别人。
webmonitor
V2EX  ›  奇思妙想

如果有一款软件,可以 24 小时帮您盯着网络上的一切感兴趣的内容,一旦有符合条件的变更立即通知你,你愿意为它点个赞吗?

  •  
  •   webmonitor · 2022-11-10 00:12:12 +08:00 · 10962 次点击
    这是一个创建于 505 天前的主题,其中的信息可能已经有所发展或是发生改变。

    在小破站上出现了一款这样的软件,分享给大家 :)

    官网: https://courier.toptopn.com/?from=v2ex 视频: https://www.bilibili.com/video/BV1Pm4y1c7er/

    101 条回复    2022-11-13 15:43:09 +08:00
    1  2  
    maggch97
        1
    maggch97  
       2022-11-10 00:45:42 +08:00
    用可视化屏蔽掉代码细节, 最终会让可视化那一层的逻辑变得非常复杂, 并且也不如代码灵活
    v2defy
        2
    v2defy  
       2022-11-10 00:58:53 +08:00   ❤️ 1
    这也只能是我得事先知道我对什么感兴趣,并且明确的告诉这个软件,然后它做的只是监视更新而已。

    但很多时候我不知道自己对什么感兴趣,需要大数据和人工智能根据我的全网历史记录去猜才行,这太难了,没有哪个软件能做得到。也就手机版 chrome 的探索功能稍微能用一点。
    cxtrinityy
        3
    cxtrinityy  
       2022-11-10 01:16:35 +08:00 via Android
    你是在说尽全力挖用户数据的 Google 么🙃
    maggch97
        4
    maggch97  
       2022-11-10 01:39:05 +08:00
    @v2defy 搜索引擎掌握了每个人的喜好关注, 做全网的推荐确实是唯一的发现内容的好方法.
    TcDhl
        5
    TcDhl  
       2022-11-10 01:42:24 +08:00
    毫无兴趣把我自己感兴趣的东西告诉第三方, 并让其他人掌握收集, 感觉木有意义
    JensenQian
        6
    JensenQian  
       2022-11-10 01:50:07 +08:00 via Android   ❤️ 27
    你说的这东西是不是叫 rss
    crab
        7
    crab  
       2022-11-10 03:45:02 +08:00
    谷歌快讯订阅关键字
    buermo
        8
    buermo  
       2022-11-10 05:34:23 +08:00 via Android
    他怎么知道我对什么感兴趣
    Google 挖了我那么多数据也没给我推荐几个感兴趣的
    ddzzhen
        9
    ddzzhen  
       2022-11-10 07:51:46 +08:00 via Android
    之前用过 distill ,有点像,很好用
    webmonitor
        10
    webmonitor  
    OP
       2022-11-10 08:18:33 +08:00
    @buermo 兄弟,你对什么感兴趣,就圈一下加入任务,不是只能识别。不过会有规则推荐
    webmonitor
        11
    webmonitor  
    OP
       2022-11-10 08:19:47 +08:00
    @crab 不太一样,订阅是别人推送给你,这个是自己圈自己需要的内容
    webmonitor
        12
    webmonitor  
    OP
       2022-11-10 08:21:11 +08:00
    @JensenQian 支持 rss ,但不是 rss ,rss 是别人整理的固定渠道内容,这个是你可以任意添加你需要的网页内容,而且支持更脚本预处理,可以非常灵活且强大
    webmonitor
        13
    webmonitor  
    OP
       2022-11-10 08:22:53 +08:00
    @TcDhl 怎么会把你感兴趣的东西告诉第三方呢,所有的数据都是在你本地保持并管理的,当然如果愿意也可以同步到服务器,但并不会告诉第三方,可以看看隐私协议: https://courier.toptopn.com/privacy.html
    webmonitor
        14
    webmonitor  
    OP
       2022-11-10 08:23:45 +08:00
    @maggch97 咱们这个不是大数据推送,是自己收集自己感兴趣的内容,工具帮你盯着。
    webmonitor
        15
    webmonitor  
    OP
       2022-11-10 08:25:21 +08:00
    @cxtrinityy 不是,咱们这个不是大数据智能推送,是自己 DIY ,现在的网络世界遍地都是大数据推送,大家都被智能麻了,咱们这个是自己 DIY ,自己收集自己需要的数据源,然后工具可以 24 小时帮您盯着变化,并推送提醒
    webmonitor
        16
    webmonitor  
    OP
       2022-11-10 08:29:16 +08:00
    @maggch97 你说的没错,看起来越简单的事情,背后往往越复杂。不过咱们这个工具除了用起来简单,因为有了预处理加码,扩展能力非常强,如果你懂技术,几乎就无所不能了
    webmonitor
        17
    webmonitor  
    OP
       2022-11-10 08:30:43 +08:00
    @v2defy 现在的信息流、短视频都是智能推荐,咱们现在还没做智能推荐,是自己 DIY ,自己收集需要的信息源然后监控起来,当然也可以参考别人的监控内容
    webmonitor
        18
    webmonitor  
    OP
       2022-11-10 08:57:43 +08:00
    现学现用,我就是通过这个工具监控这个帖子的回复的。

    有两种方式:
    1. 用论坛提供的 rss 源: https://www.v2ex.com/n/35f988f6-4e68-4e89-8403-ce2e8e5283ea.xml
    2. 用圈选:xx 条回复 (选择器 xpath id("Main")/DIV[4][@class="box"]/DIV[1][@class="cell"]/SPAN[1][@class="gray"])
    privil
        19
    privil  
       2022-11-10 09:08:49 +08:00
    easy 开发的那个东西就是你描述的这个
    webmonitor
        20
    webmonitor  
    OP
       2022-11-10 09:11:59 +08:00
    @privil 老铁,可以对比一下,谁的好用群众的眼光是雪亮的
    lkk
        21
    lkk  
       2022-11-10 09:15:33 +08:00
    墙也干这事,通知你的是公安局。点赞?
    Tink
        22
    Tink  
       2022-11-10 09:19:29 +08:00
    我记得 serverchan 好像出过一个类似功能的
    webmonitor
        23
    webmonitor  
    OP
       2022-11-10 09:21:38 +08:00
    @Tink 对,可以货比三家,接受全网任何竞品 PK
    privil
        24
    privil  
       2022-11-10 09:22:19 +08:00   ❤️ 12
    你推广就放推广,别放什么奇思妙想。
    webmonitor
        25
    webmonitor  
    OP
       2022-11-10 09:22:44 +08:00
    @lkk 说话很冲啊,不过还是要感谢你直言不讳,合规问题会优先考虑
    kidult
        26
    kidult  
       2022-11-10 09:40:03 +08:00
    你可能推广错地方了,还是去小白一点的社区推广,比如 B 站

    这种功能 V 站人均五分钟手撸一个,不开玩笑
    andyJado
        27
    andyJado  
       2022-11-10 09:51:10 +08:00
    免费吗? 开源吗? 没见说💅
    Hagrid
        28
    Hagrid  
       2022-11-10 09:56:17 +08:00   ❤️ 2
    以前的即刻就够用了,可惜
    nazhenhuiyi294
        29
    nazhenhuiyi294  
       2022-11-10 09:59:23 +08:00
    商务人士应该有用。
    Blanke
        30
    Blanke  
       2022-11-10 10:00:51 +08:00
    看官网介绍只支持网页,所以为啥能"盯着网络上的一切感兴趣的内容",app 没有网页版能吗
    ripperdev
        31
    ripperdev  
       2022-11-10 10:03:23 +08:00
    推广就推广,发在奇思妙想板块是想干啥???
    lovedebug
        32
    lovedebug  
       2022-11-10 10:06:07 +08:00
    那样我会累死。。。
    pkwenda
        33
    pkwenda  
       2022-11-10 10:12:27 +08:00
    我光是 利用 IFTTT 根据需求抓取的的 producthunt 和 V2EX 的奇思妙想订阅,都已经看不过来了。
    webmonitor
        34
    webmonitor  
    OP
       2022-11-10 10:23:24 +08:00
    @Blanke 需要自定抓包监控接口
    webmonitor
        35
    webmonitor  
    OP
       2022-11-10 10:23:52 +08:00
    @andyJado 免费,但没开源
    webmonitor
        36
    webmonitor  
    OP
       2022-11-10 10:24:31 +08:00
    @kidult 打扰了,原来都这么高端,我去充充电
    ypzhou
        37
    ypzhou  
       2022-11-10 10:49:57 +08:00
    你这不是推广吗
    sutking
        38
    sutking  
       2022-11-10 10:50:17 +08:00 via iPhone   ❤️ 1
    你说的这玩意我第一个想到的是即刻 app ,不过是黑色的那个,自从 Google Reader 死了之后那家伙还挺棒的,后来变黄了之后即刻 app 就不再是那个即刻 app 了,Google Reader 死了,即刻 app 也黄了,我觉得这类东西已经不存在了……
    webmonitor
        39
    webmonitor  
    OP
       2022-11-10 11:13:37 +08:00
    @ypzhou 兄弟,如果您自己辛辛苦开发了一个工具,然后拿出来分享一下,有什么问题吗?
    对于需要的人这就是分享,如果不需要忽略即可
    chunyu
        40
    chunyu  
       2022-11-10 11:34:52 +08:00
    -------再推送到微信
    LavaC
        41
    LavaC  
       2022-11-10 11:42:32 +08:00
    工具挺好,不过和个人习惯冲突。

    想起之前用 distill 时帮我监控 csgo 的突围箱子价格,后来忘了 distill 账号了取消不了监控还是隔三差五给我发箱子价格。
    wallriding
        42
    wallriding  
       2022-11-10 11:44:50 +08:00
    现在的人戾气太重,不喷两句不舒服…… 楼主,我支持你,我觉得这个工具有点用。
    Rache1
        43
    Rache1  
       2022-11-10 11:51:44 +08:00   ❤️ 2
    这就是 web monitor 吧
    webmonitor
        44
    webmonitor  
    OP
       2022-11-10 12:19:51 +08:00
    @wallriding 嗯,需要就自取,不需要忽略就好,做的东西不容易,感谢说了句中肯的话
    webmonitor
        45
    webmonitor  
    OP
       2022-11-10 12:21:12 +08:00
    @Rache1 web monitor 没有了解过哈,不知道它有什么功能
    lalalafly
        46
    lalalafly  
       2022-11-10 13:08:29 +08:00
    支持!之前用过 Distill 但是收费版实在太贵了。这款插件刚试用了一下有几个问题还要请教楼主。
    matzoh
        47
    matzoh  
       2022-11-10 13:11:26 +08:00
    这评论区戾气也太重了,连介绍都不看就开始质疑,支持私有化部署
    lalalafly
        48
    lalalafly  
       2022-11-10 13:13:14 +08:00
    接 46 楼。 1. vip 用户是怎么收费的? 2. 请问如果只在本地监控的话,有没有服务器成本的?为什么有最大监控任务数量呢?
    JankinAnn
        49
    JankinAnn  
       2022-11-10 13:17:52 +08:00
    有用,感谢您的分享,有空私有部署玩下
    webmonitor
        50
    webmonitor  
    OP
       2022-11-10 13:43:22 +08:00
    @lalalafly
    1. VIP 提供技术服务和扩展能力,绝大部分用户是不需要的
    2. 本地监控并非没有服务器成本,邮件和微信推送必须通过服务器实现(而且是需要按量消耗成本的),另外跑 1 个任务和 1000 个任务必然是不一样的,1000 个任务涉及的问题会多很多,需要承担的服务器成本和维护精力都更多,所以不可能都无限制地使用
    milukun
        51
    milukun  
       2022-11-10 14:16:46 +08:00
    目前只支持静态页面是吗?
    我监控了一个页面,数据是额外加载的,并不生效
    webmonitor
        52
    webmonitor  
    OP
       2022-11-10 14:37:41 +08:00
    @milukun 必须支持动态,程序会自动等待选区有内容再提取,如果选区有其他的内容 且 接口返回较慢就会出现提取不到动态内容的问题

    数据如果是异步加载 可以设置一个延迟检测时间,或者只圈数据区域
    xilou31
        53
    xilou31  
       2022-11-10 14:46:05 +08:00
    感觉还是挺有意思的
    leipengcheng
        54
    leipengcheng  
       2022-11-10 15:31:53 +08:00
    能不能出几个例子,不知道这个能干嘛
    EastLord
        55
    EastLord  
       2022-11-10 15:31:55 +08:00
    是立即通知吗,看起来像是定时刷新,获取变更 然后通知
    HankAviator
        56
    HankAviator  
       2022-11-10 16:17:44 +08:00
    可以和竞品 visualping 对比一下
    GalileoP
        57
    GalileoP  
       2022-11-10 16:30:50 +08:00 via Android
    有用,能全网监控舆情不,我都不知道我需要的信息在哪里,只知道关键字
    LavaC
        58
    LavaC  
       2022-11-10 16:33:11 +08:00
    @GalileoP 你想找的可能是:google analytics
    Onlyihih
        59
    Onlyihih  
       2022-11-10 16:35:15 +08:00
    戾气是有点重不过本来就是什么牛鬼蛇神都有。
    l0wkey
        60
    l0wkey  
       2022-11-10 16:40:40 +08:00
    @LavaC #58 是想说 google alerts 吧
    hoky
        61
    hoky  
       2022-11-10 16:55:40 +08:00
    实时性怎么样?我先体验一下,监控一下黑五优惠。
    LavaC
        62
    LavaC  
       2022-11-10 17:20:38 +08:00
    @l0wkey 靠,记岔了。
    liangtao927190
        63
    liangtao927190  
       2022-11-10 17:41:37 +08:00
    老哥支持你,最近刚好有需求要监控一些网站的价格数据,简单来说就是看经销商有没有偷偷降价。
    本来想自己写 Python 爬虫去抓的,有这个东西就方便了。
    Lavventura
        64
    Lavventura  
       2022-11-10 17:45:05 +08:00   ❤️ 1
    早期版本的即刻不就是吗
    moonkiller
        65
    moonkiller  
       2022-11-10 17:56:15 +08:00
    @Hagrid 以前啥样?现在咋没了
    webmonitor
        66
    webmonitor  
    OP
       2022-11-10 18:44:29 +08:00
    @liangtao927190 嗯,感谢
    webmonitor
        67
    webmonitor  
    OP
       2022-11-10 19:24:42 +08:00
    @hoky 试试吧,看看是不是你需要的
    huangzhe8263
        68
    huangzhe8263  
       2022-11-10 19:30:40 +08:00
    开源么,如果开源的话布一个试试看
    webmonitor
        69
    webmonitor  
    OP
       2022-11-10 19:55:02 +08:00
    @huangzhe8263 暂时没有计划开源,需要就用用
    sparkpark
        70
    sparkpark  
       2022-11-10 20:26:44 +08:00
    看起来不错,先支持下
    sinyu1012
        71
    sinyu1012  
       2022-11-10 21:04:54 +08:00
    即刻
    sinyu1012
        72
    sinyu1012  
       2022-11-10 21:05:05 +08:00
    即刻 App
    webmonitor
        73
    webmonitor  
    OP
       2022-11-10 21:22:41 +08:00
    @sinyu1012 兄弟,可以深入了解一下,应该不太一样,咱们可以推送到微信,可以自定义脚本的
    zi
        74
    zi  
       2022-11-10 22:07:57 +08:00
    好用好用,不用自己写代码抓取了
    gxm123gxm
        75
    gxm123gxm  
       2022-11-10 22:47:48 +08:00
    点赞了,但是关于视频的几个小建议:
    多做一些关于实际场景的简短视频演示(不需要弄太花里胡哨的配音)《网页更新提醒,高亮变化内容和关键字》这个内容不知道是 B 站压缩还是咋样,我选了最高清晰度的 720p 也很模糊,没明白是解决了啥问题。

    找几个典型场景,比如价格变化(瞎举的,如果不合适请不要介意)做演示,应该播放量能更容易跑起来
    DIO
        76
    DIO  
       2022-11-10 23:55:12 +08:00 via Android
    感觉还挺有用的
    pengpengpeng
        77
    pengpengpeng  
       2022-11-11 02:11:30 +08:00
    支持 OP 。

    坚持下去。
    哈哈
    pengpengpeng
        78
    pengpengpeng  
       2022-11-11 02:20:10 +08:00
    提个建议:
    如果大概知道某个网页是每天的某个时段更新,是否可以设置监控时间为某个时段。

    如:只在每天的 10 点到 10 点半,才监控某个网站 /网页的更新。
    7qbsx2kl
        79
    7qbsx2kl  
       2022-11-11 05:58:34 +08:00   ❤️ 1
    [huginn]( https://github.com/huginn/huginn) 開源免費 selfhosted ,利用各種插件可以靈活按自己需求定義流程。
    webmonitor
        80
    webmonitor  
    OP
       2022-11-11 08:11:01 +08:00
    @gxm123gxm 嗯,视频确实做的不好,值得批评,后面计划重新做一个
    webmonitor
        81
    webmonitor  
    OP
       2022-11-11 08:11:49 +08:00
    @pengpengpeng 收到鼓励,继续加油💪
    webmonitor
        82
    webmonitor  
    OP
       2022-11-11 08:14:04 +08:00
    @pengpengpeng 可以的呀,支持设置监控时间段,每个任务可以单独设置
    webmonitor
        83
    webmonitor  
    OP
       2022-11-11 08:15:20 +08:00
    @GalileoP 会推荐一些,主要还是需要自己不断补充信息源,因为每个人关注的内容都不一样
    xctcc
        84
    xctcc  
       2022-11-11 09:12:16 +08:00
    监控一下淘宝的价格试看看,如果满意的话会考虑付费
    huhexian
        85
    huhexian  
       2022-11-11 09:15:54 +08:00
    王婆卖瓜,自卖自夸。
    pengpengpeng
        86
    pengpengpeng  
       2022-11-11 09:23:45 +08:00
    @webmonitor 另外 safari 有可能支持不? 主力浏览器。
    webmonitor
        87
    webmonitor  
    OP
       2022-11-11 10:34:11 +08:00
    @pengpengpeng 目前还没计划呢,因为 mac 上 chrome 挺好用了
    webmonitor
        88
    webmonitor  
    OP
       2022-11-11 10:34:51 +08:00
    @huhexian 兄弟,你也可以搞一个出来自己夸夸,我也愿意帮你夸一下
    hackpro
        89
    hackpro  
       2022-11-11 11:20:26 +08:00 via iPhone   ❤️ 1
    我觉得这个想法很好啊 问题怎么判定用户关注的网页上某个具体的内容真的发生了变化并且及时通知到关注者 不知道开发者是怎么实现的
    techmale
        90
    techmale  
       2022-11-11 13:43:52 +08:00 via iPhone
    加油
    webmonitor
        91
    webmonitor  
    OP
       2022-11-11 13:56:50 +08:00
    @hackpro 感兴趣的内容是需要自己收集的,目前没有智能推送
    ragnaroks
        92
    ragnaroks  
       2022-11-11 15:28:21 +08:00
    如果真的能完全达到标题所说的效果,我甚至愿意订阅制付费。

    但是这个太难了,众口难调,比如最简单的,我想监控互联网上某台机器( IP )的某个端口在接受到某个特定字节数组的时候是否会返回另一个特定字节数组,这个简单来说就是协议探测,然而光是探测 v2ray 这类就有好几种方法。

    另外点进去楼主的链接发现只能监控 HTTP 响应内容,离标题太远。
    webmonitor
        93
    webmonitor  
    OP
       2022-11-11 15:36:09 +08:00
    @ragnaroks 不太可能做得这么大而全,现在都是针对普通用户的常用场景的,网页 /rss/api ,你这个太垂直了
    标题确实是不严谨,但好像改不了。
    另外,想你说的这种需求,倒是可以自定义脚本,然后用 xpusher 推送通道触发
    ragnaroks
        94
    ragnaroks  
       2022-11-11 15:38:32 +08:00
    @webmonitor 只能说加油吧,如果真的做到大而全就是垄断级产品了。
    webmonitor
        95
    webmonitor  
    OP
       2022-11-11 15:40:56 +08:00
    @ragnaroks 收到,感谢
    woscaizi
        96
    woscaizi  
       2022-11-11 17:00:59 +08:00   ❤️ 1
    做得很棒,这个功能其实和 rss 这样网站官方暴露的接口不一样;这个更主动,更加灵活些,类似于一个定制的爬虫。
    huhexian
        97
    huhexian  
       2022-11-11 22:33:43 +08:00   ❤️ 1
    webmonitor
        98
    webmonitor  
    OP
       2022-11-12 10:25:21 +08:00
    @huhexian 天啦啦,你也太给力,太给力了,感动 ing
    webmonitor
        99
    webmonitor  
    OP
       2022-11-12 10:26:07 +08:00
    @woscaizi 感谢夸奖,有任何问题或想法随时找我
    lysoul
        100
    lysoul  
       2022-11-12 15:22:21 +08:00 via iPhone
    一直用 huginn,本地部署,功能非常强大,只是上手有难度
    1  2  
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2669 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 37ms · UTC 15:19 · PVG 23:19 · LAX 08:19 · JFK 11:19
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.