首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
这是一个专门讨论 idea 的地方。

每个人的时间,资源是有限的,有的时候你或许能够想到很多 idea,但是由于现实的限制,却并不是所有的 idea 都能够成为现实。

那这个时候,不妨可以把那些 idea 分享出来,启发别人。
V2EX  ›  奇思妙想

做个爬虫将所有互联网信息进行离线存储包括音视频可行性

  •  
  •   natforum · 26 天前 · 1925 次点击
    前期只存储网页,后期做大了就开始存储音视频以及其他文件,但是仅仅存储,不公开传播,为人类互联网做贡献。求这种可行性方案,如果以后有了一定量的数据,可以进行机器学习。给人们打造一个透明的互联网
    19 回复  |  直到 2019-10-19 09:56:56 +08:00
        1
    siknet   26 天前   ♥ 1
    Internet Archive: Wayback Machine

    这个网站你没去过?
        2
    murmur   26 天前
    https://archive.org/
    看了一眼,视频很多打了膜乎处理,不过看样子不是色情就是暴恐
        3
    zdnyp   26 天前
    0
        4
    zdnyp   26 天前
    @zdnyp #3 可行性
        5
    azh7138m   26 天前
    你要问能不能做,那肯定是能做的
    就看你有没有那么大的存储,能不能正常的对抗反爬了
    总结下就是,你这个需求,加钱就行(
        6
    gIrl1990   26 天前
    但是仅仅存储,不公开传播,为人类互联网做贡献。
    你都“仅仅存储” 还怎么“做贡献”???
        7
    loginbygoogle   26 天前   ♥ 1
    不可行,原因,没钱没技术。
        8
    silencefent   26 天前   ♥ 1
    我在想你准备几个月进去吃免费餐
        9
    est   26 天前
    现在网上这些上下左右全是不同厂牌水印带音量按钮图标在中央的录屏 n 手视频我都爬不下手。。。更不用说 android 那些发绿的传家宝图片了。。。。估计 LZ 存储了会发现自己也要 ffmpeg 再压缩一次节省空间。。。
        10
    K1ri7o   26 天前 via iPhone
    价钱世界可及
        11
    K1ri7o   26 天前 via iPhone
    @K1ri7o 加钱 (打错
        12
    CloudnuY   26 天前
    17 年 quora 上就估算 youtube 储存达到了 10EB……
        13
    tabris17   26 天前
    你已经游走在犯罪的边缘了
        14
    laminux29   26 天前
    楼主是不是觉得,带宽、硬盘、服务器,是天上掉下来的?
        15
    aoling   26 天前
    痴人说梦 首富干这个事情都要考虑下,
    你有资金嘛
        16
    locoz   26 天前
    不说别的,你哪来那么大的带宽和存储空间?硬盘多了之后谁来维护?
        18
    Bigglesworth   25 天前
    棱镜不就干了么?
        19
    dosmlp   24 天前 via Android
    可行,但是没钱
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   4142 人在线   最高记录 5043   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 22ms · UTC 06:47 · PVG 14:47 · LAX 22:47 · JFK 01:47
    ♥ Do have faith in what you're doing.