[论文解读] A network file system over HTTP: remote access and modification of files and "files"

Oleg Kiselyov|ArXiv.org|Mar 15, 2000

Distributed and Parallel Computing Systems被引用 8

一句话总结

HTTPFS 提出了一种用户空间的网络文件系统，通过在 UNIX 或 Windows 主机上运行的 CGI 脚本，利用 HTTP 实现对远程文件和目录的访问，模拟本地文件系统语义。它支持完整的文件操作（读取、写入、追加、截断），并发隔离性优于 POSIX，提供标准 API 及与 Midnight Commander 的集成以支持交互式使用。

ABSTRACT

The goal of the present HTTPFS project is to enable access to remote files, directories, and other containers through an HTTP pipe. HTTPFS system permits retrieval, creation and modification of these resources as if they were regular files and directories on a local filesystem. The remote host can be any UNIX or Win9x/WinNT box that is capable of running a Perl CGI script and accessible either directly or via a web proxy or a gateway. HTTPFS runs entirely in user space. The current implementation fully supports reading as well as creating, writing, appending, and truncating of files on a remote HTTP host. HTTPFS provides an isolation level for concurrent file access stronger than the one mandated by POSIX file system semantics, closer to that of AFS. Both an API with familiar open(), read(), write(), close(), etc. calls, and an interactive interface, via the popular Midnight Commander file browser, are provided.

研究动机与目标

• 通过 HTTP 实现远程文件和目录的透明访问，使其如同本地文件一般。
• 在远程系统上支持完整的文件操作——创建、读取、写入、追加和截断。
• 提供强于 POSIX 的并发隔离机制，接近 AFS 语义，以实现可靠的并发访问。
• 完全在用户空间运行，无需内核修改，提升可移植性和部署便捷性。
• 与现有工具（如 Midnight Commander）集成，实现交互式文件管理。

提出的方法

• 使用 HTTP 作为传输层，与运行 Perl CGI 脚本的远程主机通信。
• 通过标准系统调用（open、read、write、close）模拟本地文件系统行为。
• 通过向远程服务器上的 CGI 脚本发送 HTTP POST 和 GET 请求来实现文件操作。
• 使用超越 POSIX 语义的文件锁机制，实现强并发控制。
• 提供用户空间实现，避免内核级修改，提升可移植性。
• 通过兼容的接口层支持与 Midnight Commander 文件浏览器的集成。

实验结果

研究问题

• RQ1 是否可以不依赖内核组件，在 HTTP 上有效构建网络文件系统？
• RQ2 如何仅通过 HTTP 和 CGI 实现远程文件系统的强并发隔离？
• RQ3 在 HTTP 上多大程度上可以模拟标准系统调用，以提供无缝用户体验？
• RQ4 交互式文件管理工具（如 Midnight Commander）能否有效集成到基于 HTTP 的文件系统中？
• RQ5 使用 HTTP 进行文件系统操作时，会带来哪些性能与可靠性权衡？

主要发现

• HTTPFS 成功通过 CGI 脚本在 HTTP 上模拟了本地文件系统操作（读取、写入、创建、截断）。
• 该系统提供的并发控制强于 POSIX，接近 AFS 的隔离级别。
• 与 Midnight Commander 文件浏览器实现了完整集成，支持交互式远程文件管理。
• 实现完全在用户空间运行，无需内核修改，提升了可移植性。
• 在 UNIX 和 Windows 主机上均可实现远程访问，前提是存在兼容的 CGI 脚本。
• 系统支持通过 Web 代理和网关访问，提升了部署灵活性。