Skip to main content
 首页 » IPFS

ipfs部署**站

2021年04月19日19

技术精选丨如何在IPFS上托管个人网站

您正在阅读的网站可以完全使用,而无需在服务器上运行后端。这样的网站称为静态网站。

静态网站向浏览器提供所有内容和逻辑(JavaScript)。

所有交互(例如搜索或单击内部链接)都是通过随附的JS脚本执行的。

尽管这听起来像是外行的期望,但它与Internet的当前状态相去甚远。

在早期,许多网站仅由静态HTML网站组成。如今,许多现代网站都依赖于运行中的集中式后端服务器。

这不仅带来动态体验,而且导致链接失败,并且URL的使用寿命有限。

许多人至少经历过一次链接断开的现象,并且随着Internet的老化,这个问题还会增加。

内容可寻址存储最近在Internet上实现分布式存储的努力再次导致了诸如内容可寻址存储之类的技术。

内容寻址使用数学哈希函数将网站的内容压缩为称为哈希的短字符串。

哈希函数的优点在于它们很可能产生唯一的输出和唯一的地址。

这允许人们仅基于内容哈希使用和交换内容的用例。 IPFS(星际文件系统)就是这种应用程序的一个例子。

IPFS引入了针对内容的寻址方案,并且它不使用中央服务器的传输网络进行信息交换。

当使用IPFS应用程序的人员了解其他节点所需的信息时,他们将自动充当其他节点的服务器。

这样,无需大型中央服务器或内容分发网络即可实现功能更强大的分布式Internet。如果要使用IPFS托管网站,则它必须是静态的。

使网站静态化该网站由Hugo构建,并已产生静态输出。启用对IPFS寻址的relativeURL仅重要。

我们仍在使用雨果的学术主题。 Academic使用各种外部字体和JavaScript资源来增强内容表示。尽管完全有可能托管引用非IPFS资源的IPFS网站,但它并未完全分散。幸运的是,学术主题还提供了一个下载工具,可以将所有外部资产保存在网站文件夹中。

在撰写本文时,主下载器尚不支持所有资产,但是一个开放的请求增加了对大多数丢失内容的支持。丢失的另一件事是字体,这些字体最初来自我们手动下载的Google字体CDN。

现在,我们有了一个运行在本地字体和JavaScript资源1上的完整网站。

这样,您可以下载网站文件并终止Internet连接,您将获得相同的体验。

托管IPFS网站如果使用IPFS对网站进行哈希处理,则会得到以下内容哈希:/ ipfs / QmSPZuY3K1XieH7M9zh4qs9MEGFf4GZdBv3STaiJpBaC6o现在,其他人可以直接使用自己的IPFS客户端或使用可用的浏览器插件之一来检索网站。

此博客文章的草稿已散列并固定到本地IPFS节点。为了使其他人能够检索该网站的文件,我们必须保持IPFS节点运行或要求其他人对其进行缓存(固定)。

有所谓的固定服务(例如Pinata)提供此服务。另一个项目是Filecoin,它基于IPFS构建。它使用区块链来奖励节点以保持IPFS文件固定,从而提供金钱激励。

在过去的几天中,我们一直在寻找将新内容添加到git存储库中时自动固定此网站的方法。就在昨天,Textile宣布了一个基于IPFS的动态存储桶。尽管不是博客文章的主要重点,但他们还引入了新的GitHub Actions,它将内容自动部署到其免费存储桶托管中。

我们已经在基于Gatsby的演示站点上扩展了其脚本,以供Hugo使用。

GitHub Action构建文件并将其推送到Textile桶现在,在每个推送请求之后,GitHub Action将编译Hugo输出并将其推送到也固定并与IPFS一起使用的Textile桶。每次更改并推送到存储库后,我们的网站内容将自动显示在内容哈希下。

域名解析为了让人们知道站点可以使用IPFS,可以使用DNSLinks。这些是附加到DNS域的TXT记录,它们指示可用的IPFS资源。

IPFS浏览器扩展可以检测到这些记录,并在访问此类站点时自动使用IPFS进行内容检索。

来自Textile的脚本还包括用于DNS记录的更新程序,该程序将IPFS哈希发布到Cloudflare DNS服务。每次手动发布后,此脚本将更新DNSLink。

为了拥有以太坊名称服务(ENS)的完全分散的解决方案,可以使用诸如ENS之类的技术来代替DNS系统。

当前,我们手动更新存储在ENS中的IPFS哈希,但是将来我们可以使其自动化。

与IPFS的向后兼容性仍处于起步阶段。大多数流行的浏览器不支持大多数Internet用户所需的协议。

在此之前,有必要使用Web服务器和DNS以传统方式托管网站。

Cloudflares IPFS网关和DNS解决方案可用于通过普通HTTP自动提供IPFS内容。

当前,此博客由Netlify托管,以支持未启用IPFS的访问者。

总的来说,这个过程仍然是一件复杂而艰巨的事情。尽管IPFS及其生态系统正在稳步改善,但仍有许多工作要做。

幸运的是,出现了诸如Terminal.co之类的新服务,它们提供了端到端的分布式托管解决方案。

报告/反馈

IPFS引领新一轮科技浪潮 东风来临之际才能乘风破浪

IPFS引领了新的技术浪潮,即在东风来临之时顺风顺水。 IPFS鼓励“反pla窃”以保护原著窃道歉并迅速发酵,引起了热烈的讨论。 15年后,郭敬明在微博上道歉,for窃了庄瑜的小说《内外圆》,他的小说《几朵花落在梦中》。 “对于版权问题,琼琼已正式道歉。

实际上,近年来发生的gi窃事件层出不穷,如何保护原创性一直是每个人都关心的问题。本质上,抵制窃是保护内容安全性和内容确认的问题。在大数据时代,用户生成的大量内容和数据给本地存储带来了巨大压力,存储系统难以承受,甚至经常面临系统崩溃的考验。集中式云服务平台经常出现问题,给用户带来很多麻烦。如果不小心,可能会泄露用户的数据内容,或者正确的确认信息未知。

使用分布式存储网络技术可以有效避免网络事故。

作为突破性的网络基础协议,IPFS分布式存储网络可以完美解决当前的Internet内容数据存储瓶颈和存储安全性问题。

将文件存储在世界各地,并通过分布式技术将它们存储在不同地方,因为存储的数据是零碎的数据,不完整的文件,并且在外来者将其带入后,它们只是一堆凌乱的代码。 ,数据很难泄漏。

因为存储的文件不在集中式服务器上,所以文件相对安全,不会有服务器崩溃,电缆被挖出,服务中断等情况。此外,由于没有集中式服务器,黑客无法执行不必要的操作攻击,数据将不会被窃取。

分布式存储网络使用加密算法,提供数据存储的矿工无法获取数据,大大满足了某些内容的隐私要求。

同时,IPFS网络的内容寻址无法更改,并且用户无法编辑文件。每次修改都会创建一个新文件。通过使用IPFS内置的工具,矿工有权授权用户添加,删除,移动,编辑文件和更新链接;未经授权的用户不能修改或盗用文件。因此,分布式存储比集中式存储更安全,更方便,更可靠。分布式存储网络是未来Internet技术发展的趋势。

如今,随着技术创新的飞速发展,分布式存储将改变当今的网络生态环境,并引领新的技术浪潮。星际分布式存储领域的顶级服务提供商致力于研究和开发分布式存储技术,为成千上万的用户提供具有成本效益的产品和软件服务。作为一个理想的,有远见的企业,它及时把握了时代潮流。当“东风”逼近时,它可以乘风破浪,顺势而上,攀登高峰。

回顾2020年Filecoin网络的成就随着2021年的到来,我将花些时间回顾2020年Filecoin社区和Filecoin网络的成就。尽管2020年Filecoin的亮点是2020年10月主网启动到处都是公告和生态系统亮点。现在,让我们回顾一下当年最激动人心的事件:2020年5月:扩展存储1)Filecoin Discover Filecoin在其网络测试中推出了FilecoinDiscover,目的是鼓励Filecoin矿工存储有价值的数据,并在此过程中赚取额外的FIL。 Discover计划赔偿Filecoin矿工,以从Filecoin Discover存储区域(文学,科学,艺术和历史的重要数据库)中选择数据。希望加入Filecoin网络的矿工可以访问此网站,选择要存储的数据集,然后以成本价将其接收到驱动器上。 FilecoinDiscover在开发和社区参与阶段获得的大量经验帮助塑造了FilecoinPlus项目。

Filecoin Discover继续促进Filecoin的使命,即为人类信息创建一个分散,有效和强大的基础。

2)测试网络的第二阶段于2019年底开始,Filecoin网络测试的第一阶段开始。第二阶段从五月开始。测试网2是主网启动之前的最后一个重要里程碑。此更新发布了两个可互操作的Filecoin实现(分别为Filecoin和Lotus),安全性证明(WinningPoSt和WindowPoSt),Drand,网络加密的经济结构概述,新的文档站点以及新的安全审核。

6月:准备启动主网。 Filecoin Ignite于6月宣布它将全速迈向主网。 FilecoinIgnite是多个事件的时间表,在发布之前(和发布之后),将建筑商,矿工,研究人员,爱好者和其他网络参与者聚集在一起。点燃事件包括HackFS,Spark University Hackathon,Space Race 1和2,以及新宣布的Filecoin Frontier Accelerator。

8月:激活社区1)Hacker Files 8月标志着第一个HackFS Hackathon的完成。在一个月内,有134个团队致力于整个Filecoin生态系统中的项目。共有来自50个国家和19个时区的470多名黑客参加了为期30天的虚拟活动。让我们看一下最后的前10个团队:Sailplane,公共注释网络(PAN)协议,Pnlp,BlockSig,Valist,IPFS恢复,PlanetFlare,Web3API,分散式Docker Hub和Pygate。

2)太空竞赛1太空竞赛1为期三周的比赛,旨在鼓励矿工增加网络的存储量并实现交易质量目标。在比赛中,矿工们争夺了400万FIL奖金。游戏结束时,网络上230 PiB的存储容量增加了2倍以上,超出了最初的目标。来自六大洲的400名矿工参加了这次会议。他们从会议中吸取了教训,并进行了8次网络升级,包括许多错误和性能修复。该小组还进行了一系列技术讲座,研讨会和深入调查。

3)Filecoin经济报告8月,我们发布了Filecoin经济报告。这份长达34页的概述介绍了Filecoin协议如何在结合实际回报和可靠存储的同时调整激励措施。 Filecoin网络的经济设计是用尽可能少的规则来调整激励机制,并以实用的方式奖励有用且可靠的存储。该协议的许多机制和激励机制都经过精心设计,并且只有一个目的:如果网络经济的参与者追求自己的利益,那么网络就应该发展和壮大。

9月:Mainnet开火1)Space Race 2 Space Race 1非常成功,以至于9月,我们推出了SpaceRace 2以继续向网络添加存储,并为Filecoin客户,应用程序开发人员和工具开发人员推出了新的Slingshot轨道在测试网上部署他们的产品。结果,应用程序开发人员在520,000个事务中存储了超过650 TiB的数据。 19个国家/地区的100多个项目已达成这些协议。由于他们的努力工作,这些球员在Slingshot第一阶段的总奖金中赢得了59,850 FIL。

10月:所有系统启动-主网启动1)Filecoin主网启动我们所有人都在等待的日期... 2020年10月15日世界标准时间下午3点,Filecoin网络启动。这一刻标志着多年来Filecoin社区创新和努力的巅峰。感谢所有奉献自己的时间,想法和专业知识以使Filecoin成为现实的所有人。

2)在发布一周内,我们不能让Filecoin主网无法正常庆祝。从10月19日至23日,社区举行了FilecoinLiftoff活动,为期一周的活动专门针对Filecoin生态系统。来自世界各地和Web3生态系统的发言人与我们讨论了他们的项目和Filecoin网络。 YouTube上有2,000多个用户观看了82,000多个会话。来自84个国家/地区的81位发言人代表Filecoin社区的所有参与者,包括应用程序开发人员,矿工,存储客户,决策者,人权活动家,投资者等。活动有280多个报告,包括CoinDesk,Decrypt等投资网站,财富,MorningConsult,The Block等

11月:实现超过1个Exbibyte Filecoin存储的第一个里程碑Filecoin社区在11月庆祝了它的第一个重要里程碑,而主网启动不到4周。截至11月24日,网络的分布式存储容量已超过1 EB。 Exbibyte的价格是多少?一个EiB足以存储:2.9亿个1080p视频,4,500个Wikipedia,685,000年的连续视频通话以及19个完整的Internet文件。

12月:Filecoin生态系统经济学在ETH全球论坛上,Filecoin社区举行了为期一天的存储市场峰会。在这一天,Filecoin生态系统的开发人员,投资者和合作伙伴将Filecoin网络及其经济的不同方面划分为五个主题“块”,以进行深入的讨论和概述。

展望未来:2021年的Filecoin如果有什么可以在2020年从Filecoin社区中学到的东西,那就是它的创新。 2020年社区的大部分成就将通过Filecoin测试网实现。今天,我们期待Filecoin主网上的2021年及以后,这非常令人兴奋。

祝贺整个Filecoin社区辉煌的2020年!我相信我们可以在2021年共同创造更多奇迹。

报告/反馈

加速IPFS基础设施落地,西部数据的三重独特优势

可以看出,当今现实世界和虚拟数字世界的融合已经引起了数据的爆炸性增长。

根据IDC白皮书,从2018年到2025年,中国的数据量将以30%的年均增长率领先于世界。预计到2025年,中国的数据量将增至48.6 ZB,占世界的27.8%。总体而言,中国也将成为全球数据量最大的地区,这也意味着未来的存储甚至数据基础设施将迎来重建的关键时期。

在此基础上,IPFS分散式分布式存储“应运而生”,可以解决分散式存储当前存在的一些问题,实现数据永不丢失,商业成本比集中式存储低。业界还预测,分散式分布式存储解决方案可能会在将来成为云存储的主流选择。但是在此过程中,IPFS分散式分布式存储也面临一些新的挑战。毫无疑问,如何解决这一挑战是实施IPFS基础架构的关键。

作为市场上能够提供从芯片到系统的完整存储解决方案的少数供应商之一,西部数据一直在推动存储体系结构的发展。通过创新的分层存储架构,它不仅可以为企业提供高可靠性和低成本。具有时间延迟,高可维护性和最佳总体拥有成本的IPFS解决方案还可以进一步加快IPFS基础架构建设的实施速度。

毫无疑问,这是Western Digital积极响应存储领域用户需求的最新举措,也是其不断发展和与时俱进的具体体现。我相信,这种持续的前瞻性能力,创新和产品能力将在释放海量数据的更大潜力方面发挥更重要的价值。

IPFS面临的新挑战我们知道,随着数字化转型的加速和海量数据的不断爆炸性增长,企业的存储基础架构也面临着“天翻地覆”的变化,尤其是新的数据形式和新的部署。环境和新的安全性要求对存储基础结构的开发提出了新的要求,这些要求体现在容量,性能,体系结构和管理的各个方面。正因为如此,传统的集中式存储部署方法很难满足新的存储需求,用户需要打破现状,而基于内容寻址,分布式和对等的新超媒体传输协议IPFS -peer已开始“出现”在市场中。与集中式存储方法相比,IPFS存储更安全,更快,更便宜。它不仅提高了系统的可靠性,可用性和访问效率,而且还促进了扩展并减少了硬件引入的不稳定性。

但是客观地讲,作为一种新型的存储方法,IPFS分布式存储本身也面临一些“痛点”,包括数据吞吐量低,空间利用率低,扩展困难,操作和维护效率低下,高的故障损失以及总成本。拥有率很高。

在这方面,西部数据中国区副总裁兼总经理刘刚在“萌芽的计算能力之巅” 2021年全球计算峰会和雅典娜云池全球计算能力首次庆祝活动中提到,IPFS确实是削弱了对集中存储的极端需求,并节省了服务提供的成本。但是,IPFS由许多节点组成,每个节点将面临不同的挑战。这些挑战可以概括为四个方面:“既有必要,又有必要,而且还。”-用户需要大数据,而且需要快速存储,还需要能够降低成本,还可以减少功耗。但实际上,由于市场上找不到能够同时满足上述四个要求的任何单个存储产品和存储技术。

西数公司副总裁兼中国业务总经理刘刚,因此,这也是西数公司“分层存储”概念的重要价值。

所谓“分层存储”,是指根据不同的应用场景从低到高的不同层次的“存储金字塔”中的五层:极冷存储,冷存储,温存储,热存储和极热存储。通过为每一层提供差异化​​的产品来满足不同的需求,并最终满足用户的实际需求。例如,在极冷的存储层(其特征在于更少的写入并需要持久的数据)中,SMR HDD适用于这种情况。冷存储层的特点是需要多次读取的高容量要求,而CMR HDD可以满足这种情况;同样,在热存储层中,需要相对高性能的IOPS,因此主流SSD / HDD适合这种情况。在热存储层中,它的特点是高IOPS,低延迟和高带宽。应用程序的需求很高,那么高性能SSD是“最佳选择”,最后是极热的存储层,它需要连续的低延迟,因此当前的主流方法是引入新的存储介质,例如DRAM / SCM。做满意的事。

“从分层存储的角度来看,我们可以看到不同的数据对存储设备和硬件有不同的要求。这时,当使用不同的设备来满足不同的分层源的需求时,用户才能真正解决问题。问题它不仅可以支持快速访问数据,还可以降低总体成本要求。”刘刚说。

可以看出,通过引入“分层存储”的创新方法并基于不同的存储产品来应对IPFS分布式存储中不同节点的挑战,以最大化性能和响应速度,并降低总拥有成本,更好地促进IPFS基础架构的进一步实施。

完整方案的解决方案可增强IPFS的功能。在这种情况下,作为业内为数不多的可以提供全方案存储解决方案的公司之一,Western Digital可以为用户提供从芯片到系统的广泛,完整的产品组合,并提供丰富的全系列产品。存储产品组合可支持IPFS基础架构的构建。一方面,为响应大容量数据存储需求,西部数据推出了最具成本效益的存储集群,其中包括具有IsoVibe专利振动隔离和ArcticFlow专利的业界大容量Ultrastar DC HC550 18TB HDD和4U102 Data102 JBOD低温技术实现磁盘扩展;另一方面,对于高密度计算集群,西部数据的Ultrastar DC SN640 NVMe SSD和Ultrastar DC SN840 NVMe SSD不仅可以为块爆炸的成功率提供可靠的保证,而且可以消除P1 / P2的性能瓶颈,并将SSD性能与OpenFlex与容量共享相结合,6端口和100GbE高速互连实现了SSD资源的优化。

其中,西部数据基于“分解架构”的新型OpenFlex Data24 NVMe-oF JBOF平台可以提供业界领先的100Gb以太网连接,并且通过直接连接或网关,服务器可以共享本地NVMe闪存。这样可以将NVMe存储分解为开放模式和可组合模式。测试数据表明,它可以将高性能Ultrastar DC SN840 NVMe SSD扩展到整个低延迟以太网数据结构,提供高达368TB的共​​享存储容量,这是IPFS的分布。存储存储的体系结构提供了更多选择。

不仅如此,鉴于IPFS分布式存储的“痛点”具有很高的故障损失,Western Digital的内置磁盘运行状况管理(WDCFHM)还可以通过提供“诊断,预测,改进,预防和优化”的风险,降低运营和维护成本。例如,可以预测磁盘寿命和可能出现的故障,以便用户可以提前传输或备份数据以避免数据丢失;通过健康数据分析,可以在系统侧采取相应的改进措施,从而有效降低了总维修率,从而降低了总体运维成本。更重要的是,它还可以基于整体健康状况了解潜在风险,并通过优化系统性能平衡和其他措施来减少用户业务延迟的发生,并最终“护航”用户的IPFS系统。程序比较测试表明,与传统存储解决方案(4U36 + 16T)相比,西部数据面向IPFS的存储解决方案(4U60 + 18T)不仅可以减少机柜空间46%,而且可以将功耗降低36%。 。凭借其“高性能,高密度,低成本,简单的操作和维护”优势,加快了启用IPFS基础结构的建设。

值得一提的是,去年10月,西部数据和云服务提供商Dropbox联合对其特定机箱配置进行了内部测试。用业界首个Ultrastar DC HC650 20TB SMR HDD替换了原始CMR HDD之后,存储密度增加了10%。 -20%,节省20%的TCO,不仅帮助Dropbox以更好的TCO实现更高的存储密度,而且不影响其超过6亿在线用户的数据持久性和可用性,真正成为Dropbox An的未来在构建EB级存储平台方面的重要基石。

同样,西部数据和混合云文件数据管理领域的领导者Qumulo最近达成了合作。该公司部署了Western Digital Ultrastar DC HC550 18TB HDD和Ultrastar DC SN640 NVMe SSD,以继续促进流行病研究和疫苗推广。与以前的解决方案相比,Qumulo可以在一天之内读取和分析增加到2PB的数据,并且一天之内可以处理的数据量增加了大约20倍。

在中国市场,Western Digital还与本地存储软件解决方案提供商Shanyan Data合作。通过Ultrastar企业级产品系列和JBOD存储解决方案,它为Shanyan Data创建了业界领先的高性能IPFS解决方案,以实现对硬件资源的集中管理。强大的操作和维护功能允许横向扩展性能和容量,并在复制证明以及时间和空间证明下满足IPFS场景中的存储访问。与传统存储解决方案相比,新解决方案可减少机柜空间,降低功耗并有效降低TCO成本。从这些成功的案例中可以看出,西部数据通过创新的存储架构和丰富的存储产品组合不断降低了存储使用的门槛,从而帮助企业用户更快更好地完成数字化转型。我相信这些成功。经验还将为IPFS基础结构的构建提供更多参考和参考价值。

回顾过去,三重独特优势背后的原因Western Western始终处于存储技术创新的最前沿的原因与50多年来专注于存储市场形成的三个独特优势密不可分。具体来说:首先,这是领先的闪存容量优势,TrendForce数据显示,西部数据和Kioxia占据了全球RAW NAND份额的近三分之一,位居市场第一。这不仅是Western Digital在NAND行业中的稳定领导地位。力量的体现也证明了其过去对NAND技术进行固定投资的承诺。

其次,这是领先的闪存技术的优势。在过去的二十年中,西部数据和Kioxia保持了深入的合作。同时,通过双方资本,技术和其他资源的共同投资,他们始终保持在NAND领域的领先地位。其中,由双方共同开发的第六代162层3D闪存技术最近具有比第五代技术高约10%的水平单元阵列密度。与112层堆叠技术相比,这种水平扩展技术的改进与162层堆叠的垂直存储器相结合,可以将晶圆尺寸减小约40%,从而优化了成本。与上一代产品相比,其程序性能可提高近2.4倍,读延迟减少约10%,I / O性能也提高约66%,从而使下一代接口能够满足不断增长的对更高传输速率的需求。要求。

最后,这是企业级固态驱动器的垂直集成优势。 Western Digital在企业级SSD领域具有三项核心技术优势,即完全独立的NAND闪存,高级SSD控制器和高性能固件的集成。这种垂直集成功能使SSD能够实现性能和稳定性的最终优化,并确保SSD生命周期的稳定I / O一致性。

刘刚认为:“当用户将这些最新的存储技术,大数据存储技术和快速数据存储技术应用于IPFS解决方案时,他们将进一步降低IPFS的运营和维护成本以及部署成本,并促进IPFS。基础架构的建设。”这些新技术和市场变化反映在市场上,云服务提供商当前正在迅速从低容量HDD转向大容量HDD。数据显示,主流容量点已从2020年的14T增加到16T。去年第四季度,主流容量点已从16T移至18T。这样的效果是,虽然单个磁盘的容量增加了29%,但其单位功耗却减少了21%,服务器的成本也降低了。总体拥有成本降低了11%,降低了17%。

IPFS服务提供商的“转换”速度更加令人惊讶-去年第二季度,大多数IPFS服务提供商仍在使用8TB,但仅在四个季度中,其容量已攀升至18TB,据预测,IPFS未来的服务在容量选择方面,提供商将很快“超越”云服务提供商。这也表明,IPFS服务提供商目前在基础设施建设中需要技术升级,需求更加猛烈,不仅将加速相关行业的数字化转型。全新业务场景的过程和构建也将促进经济和社会的深刻变化。

全文摘要:可以说数据是未来的核心财富,是各行各业的创新原始力量。随着IPFS的强劲崛起,数据时代的价值和收益将得到最大释放。在此过程中,Western Digital始终保持着不断的投资和创新,以及对行业需求的前瞻性认识和准确判断。凭借创新的存储架构和丰富的产品组合,Western Digital领导并推动了各个行业中的各种数据创新。帮助中国用户进行数字化转型的道路越来越广泛。

报告/反馈

微信
登录
用户名
密码
注册
用户名
密码
确认密码
昵称
邮箱
QQ
找回密码
用户名
邮箱
※ 重置链接将发送到邮箱