วิกิมีเดียเอ็นเตอร์ไพรส์
| Wikimedia Enterprise | |
|---|---|
| Building new opportunities for both revenue generation and free knowledge dissemination through partnerships and earned income. | |
| enterprise.wikimedia.com | |
| Project |
|
| Technical | |
วิกิมีเดียเอ็นเตอร์ไพรส์คือบริการข้ามองค์กรโดยมูลนิธิวิกิมีเดียที่พร้อมใช้งานผ่าน enterprise.wikimedia.com เป้าหมายของบริการคือการสร้างบริการสําหรับผู้ใช้งานเนื้อหาวิกิมีเดียในเชิงการค้าเป็นปริมาณมาก บริการได้ประกาศเป็นครั้งแรกเมื่อเดือนมีนาคม 2021 (โพสต์บล็อก, บทความบน WIRED) และเริ่มใช้งานในเดือนตุลาคม 2021 (การเผยแพร่ผ่านสื่อ, บทความบน OpenFutures)
The focus is on organizations that want to repurpose Wikimedia content in other contexts, providing data services at a large scale, so that they are faster and more comprehensive, reliable, and secure. Wikimedia Enterprise aims to improve the user experience of Wikimedia's readers beyond our own websites; increase the reach and discoverability of the content; and improve awareness and ease of attribution and verifiability by the organizations that reuse Wikimedia project data the most—through self-funding services.
There is a very high barrier to entry for using Wikimedia data, outside of the common use cases of reading or editing. This is because the content is hard for machines to segment and understand, which in turn affects how far Wikimedia project data reaches beyond our own ecosystem, and the scale of impact it can have.
In the Movement Strategy recommendations to increase the sustainability of our movement and improve user experience there are the recommendations to, respectively: "Explore new opportunities for both revenue generation and free knowledge dissemination through partnerships and earned income—for example...Building enterprise-level APIs," and "Make the Wikimedia API suite more comprehensive, reliable, secure and fast, in partnership with large scale users.... and improve awareness of and ease of attribution and verifiability for content reusers."
It is well known that a few massive companies use our projects' data. Those companies recognize that without the Wikimedia projects, they would not be able to provide as rich or reliable an experience to their own users. There has long been a feeling among community members that these companies should do more to reinvest in the Wikimedia communities for the benefits they gain from the content and resources they use.
This led to the idea of developing a new approach that is more sustainable in the long term and provides a much clearer relationship between Wikimedia and enterprise users. Most financial benefit for Wikimedia would likely only come from a very small handful of heavy for-profit users, and would feed back into the Wikimedia movement.
As this idea developed, it became clear there is a responsibility to democratize our data for organizations that do not possess the resources of these largest users, to ensure we are leveling the playing field and helping to foster a healthy internet without reinforcing monopolies. The benefits of such a service shouldn't just be for startups or alternatives to the internet giants, but also for universities and university researchers; archives and archivists; along with the wider Wikimedia movement.
ภาพรวม
Wikipedia Enterprise มุ่งความสนใจไปที่ธุรกิจซึ่งนําเนื้อหาของเราไปใช้ซ้ําในขนาดใหญ่ ไม่ว่าจะเป็นการนําไปผสมผสานกับ "Knowledge graph", การค้นหา, ผู้ช่วยคําสั่งเสียง, แผนที่, ข่าว, Community tools, แอปพลิเคชันบุคคลที่สาม และงานวิจัย การเสริมฐานข้อมูลของวิกิมีเดียด้วยการจัดโครงสร้างเนื้อหาที่ไร้โครงสร้างจะทําให้ผู้ที่นําเนื้อหาไปใช้ซ้ําสามารถตอบสนองต่อความต้องการของตนได้ และในขณะเดียวกันก็จัดเตรียมเราต่อการสร้างสรรค์อุปกรณ์และบริการใหม่ ๆ ในอนาคตที่ทุกคนสามารถเข้าถึงได้ ผู้ที่นําเนื้อหาของเราไปใช้ซ้ํากําลังมองหาส่วนประกอบสําคัญสามอย่าง
- ความถี่: การเก็บภาพสถานะปัจจุบันของโครงการวิกิมีเดียเป็นประจํา
- ความเชื่อถือได้: โครงสร้างพื้นฐานที่พึ่งพาและเข้าถึงได้
- คุณภาพ: "การปรับปรุงใหม่ครั้งสุดท้ายที่ดีที่สุด"
Emphasizing a self-funding set of specific use cases allows the Wikimedia API team to focus on volunteers, teams, and organizations looking to access (and, most importantly, interact with) our data sets. This includes the majority of community editing tools, which will be out of scope for this service. For more information on improvements to the existing Wikimedia APIs see the service page on the "API Gateway" initiative.
Program Goals:
- Content: Make more of our movement's content available in consistent machine-readable formats, freely available for all researchers and re-users.
- Resource-load: Reduce the need for high-intensity site-scraping by the highest-frequency and highest-volume reusers, which currently target our production servers.
- Fundraising: Provide a clearer and more consistent way for the largest re-users to reinvest derived benefits back to the movement, instead of making occasional altruistic donations that vary in size.
Community
Contact the team if you would like to arrange a conversation about this service with your community, at a time and meeting software platform of your choice.
Past public meetings:
มีนาคม พ.ศ. 2564 #1 & มีนาคม พ.ศ. 2564 #2, เมษายน พ.ศ. 2564, มิถุนายน พ.ศ. 2565, กุมภาพันธ์ พ.ศ. 2566
...and also at the EMWCon Spring 2021 conference (video); March and July 2022 Strategic Wikimedia Affiliates Network (SWAN) meetings; the May 2021 Wikimedia Clinic ; at Wikimania in 2021 and 2023 .
Following are the introduction paragraphs for a much more detailed Community essay .
เสรีภาพและโดยไม่เสียค่าใช้จ่ายคือสองนัยของคําว่า "เสรี" ซึ่งพบได้ทั่วไปอย่างเสรีภาพในการพูด แต่ยังหมายถึงฟรีแบบไม่ต้องเสียเงินอีกด้วย
โครงการวิกิมีเดียจะเป็นโครงการในนัยอันหมายถึงเสรีภาพ อย่างที่เป็นตลอดมา และจะเป็นอย่างนั้นตลอดไป ซึ่งเป็นหลักสําคัญแห่งวัฒนธรรมการทํางานเสรี แปลได้ว่าไม่ว่าผู้ใดก็สามารถใช้วิกิมีเดียได้อย่างไร้ข้อจํากัด รวมถึงการใช้งานในเชิงพานิชย์ ในฐานะของการเป็นขบวนการ เราต้องยอมรับในจุดนี้ นั่นคือเหตุผลว่าเพราะเหตุใดเราจึงไม่สามารถรับงานซึ่งมีสัญญาอนุญาตแบบ "ไม่ใช้เพื่อการค้า" มาใช้งานในโครงการได้ เนื่องจากสัญญาอนุญาตเช่นนี้จะจํากัดการนําเนื้อหาไปใช้ใหม่ และด้วยเหตุนี้เราจึงถือได้ว่าการใช้ซ้ําในเชิงพาณิชย์เป็นอีกวิธีการหนึ่งที่สําคัญในการกระจายความรู้ไปยังผู้เยี่ยมชม
ความเท่าเทียมจากการเข้าถึงได้ไม่ว่าจะโดยผู้ใด เป็นอีกหนึ่งนัยของคําว่าเสรี โครงการวิกิมีเดียจะดํารงความ "ไม่เสียค่าใช้จ่าย" ความสามารถในการเข้าถึงองค์ความรู้จากทั่วทั้งโครงการวิกิมีเดียนั้นนับว่าเป็นแก่นหลักแห่งพันธกิจของมูลนิธิและขบวนการ เราให้การเข้าถึงไม่เพียงเฉพาะผู้เข้าชมที่เป็นบุคคล แต่ยังต้อนรับเครื่องจักรโปรแกรมอื่นเพื่อนําเนื้อหาไปใช้ตามวัตถุประสงค์ที่ต้องการในสภาพแวดล้อมอื่นด้วย คลังข้อมูลเนื้อหาทั้งหมดของวิกิมีเดียจะยังคงพร้อมสําหรับการนําไปใช้งานต่อในหลายรูปแบบ (ซึ่งรวมถึงแต่ไม่จํากัดเพียงดัมป์ฐานข้อมูล เอพีไอ หรือการแยก) โดยไม่เสียค่าใช้จ่ายอย่างที่เป็นมา และจะเป็นเช่นนั้นตลอดไป
ดังผลลัพธ์ เนื้อหาของเรามักถูกนําไปใช้ซ้ําโดยองค์กรที่แสวงหาผลกําไรซึ่งใช้งานเพื่อรองรับแบบแผนการดําเนินธุรกิจ และกอบโกยรายได้จากการทําเช่นนี้ อันนอกเหนือจากการบริจาคขององค์กรโดยสมัครใจให้กับมูลนิธิวิกิมีเดีย ขบวนการไม่เคยได้รับผลประโยชน์จากรายได้ขององค์กรจากการให้บริการโดยขบวนการคืนแต่อย่างใด ในการรับทราบถึงปัญหานี้ ภายใต้หัวเรื่องแห่ง "ยกระดับความยั่งยืนของขบวนการ" หนึ่งในกระบวนการของยุทธศาสตร์ขบวนการซึ่งมีความว่าให้มูลนิธิวิกิมีเดียค้นหาหนทาง เช่น "เอพีไอในระดับเอ็นเตอร์ไพรส์สําหรับการใช้งานเชิงพาณิชย์ของผู้ใช้ซ้ําโดยองค์กรที่แสวงหาผลกําไร กํากับดูแลเพื่อหลีกเลี่ยงการพึ่งพารายได้หรืออิทธิพลภายนอกอื่น ๆ ที่ไม่เหมาะสมในการออกแบบและพัฒนาผลิตภัณฑ์" นอกจากนี้ ภายใต้หัวข้อ "ปรับปรุงประสบการณ์ของผู้ใช้" ได้ที่คําแนะนําเพิ่มที่ระบุไว้ว่า "ทําให้เอพีไอวิกิมีเดียมีความครอบคลุม รวดเร็ว และปลอดภัยมากขึ้น ในการสร้างพันธมิตรกับผู้ใช้ระดับใหญ่ซึ่งยังคงอยู่ในพันธกิจและแนวคิดหลักของเรา เพื่อปรับปรุงประสบการณ์ของทั้งผู้ใช้โดยตรงและโดยอ้อม เพิ่มขีดจํากัดของการค้นพบเนื้อหาของเราและศักยภาพในการเพิ่มเติมความรู้จากตนเองของผู้ใช้กลับเข้ามา และปรับปรุงความตระหนักรู้ในและความง่ายของการอ้างอิงแหล่งที่มาและการพิสูจน์ยืนยันได้นําหรับผู้นําเนื้อหาไปใช้ซ้ํา"
The Enterprise project team is developing a new resource aimed at for-profit content reusers, who have product, service, and system requirements that go beyond what we freely provide. Use of this offering will not be required for for-profit content reuse; companies can continue to use the current tools available at no cost. All Enterprise API revenue will unequivocally be used to support the Wikimedia mission—for example, to fund Wikimedia programs or help grow the Wikimedia Endowment.
This project represents a new kind of activity at the Foundation. The project is at a very early stage that should be considered a learning period. We will have successes, we will make mistakes, and we will need to adapt our strategies. The team is committed to listening, engaging, and where possible, integrating the feedback we get on our work. This document is organic and is reflective of the team's current thinking; we are attempting to document as much work as possible in the open. Up until now, our work has been shaped by a series of initial interviews with community members, Wikimedia Foundation Board and staff, researchers, and reusers.
...continue to read the rest of the Community essay. See also the FAQ and Principles .
Given the nature of the service, primary decision making for it will rest with the Wikimedia Foundation. We are seeking community input, in particular from the technical community and those who have been involved in the strategy process, throughout the lifetime of the service. Technical feedback has been gathered from colleagues at the Wikimedia Foundation, industry and research partners, technical partners across the movement, and with the broader technical communities via Phabricator. Input into the funding development side of the service will follow a similar pattern. We will continue gathering input via research interviews and focus groups, as well feedback here on Meta as per our principles.
Access
There are several methods to obtain access to the Enterprise API datasets
.
All content is freely-licensed (see also the project's principles).
- Paid
- Realtime API (Batch and Streaming) and daily dump file in NDJSON format through the Enterprise API dedicated product website: enterprise.wikimedia.com.
- Free
- Creating an account via the Enterprise API product website includes 5,000 on-demand API requests that refresh monthly (including the Structured Contents endpoint) and twice-monthly snapshot API files in NDJSON format at no cost (refreshes on the 2nd and 21st of each month).
- Several datasets are available outside of the WME website. An update of the Enterprise API data is provided for all every two weeks on the Wikimedia Dumps site. Several Beta datasets are also available on HuggingFace.
- The Snapshot API and Realtime (Batch) are available via Data services to anyone with a Wikimedia cloud services account.
- Those who have a non-commercial and mission-relevant use-case, which cannot be fulfilled by existing free-access APIs/dumps etc, can request expanded access to the API service at either reduced cost or no cost depending on usage and application.
Technical
For full information about the product, see the regular technical updates on MediaWiki.org and the documentation page.
Over time, the "API product" being offered will grow and improve. This information is accurate as of September 2024.
Overview
All of our APIs return the same structured JSON (or ND-JSON) response format making it easy to augment one API with another. Three APIs; same data, different retrieval methods:
- Retrieve bulk data with the Snapshot API
- Receive changes instantly with Realtime API streaming
- Retrieve single articles with the On-demand API
API responses include article data such as summary, image, Wikidata QID, license, and more. Also included is data specific to the last revision, such as editor, size of change, and credibility score with revert probability.
On-demand API
Reusers that use an infrastructure reliant on the EventStream platform depend on services like RESTBase to pull HTML from page titles and current revisions to update their products. High-volume reusers have requested a reliable means to gather this data, as well as structures other than HTML when incorporating our content into their KGs and products.
The Wikimedia Enterprise On-demand API allows users to retrieve single articles from any Wikimedia project at anytime.
- Make standard HTTP requests to retrieve documents by ID or name from all projects and languages, or use filters to limit response
- Request the latest page data anytime to augment your Realtime or Snapshot API data
- A wide range of commercial and consolidated schemas under SLAs
Realtime API
High-volume reusers currently rely heavily on the changes that are pushed from our community to update their products in real time, using EventStream APIs to access such changes. High-volume reusers are interested in a service that will allow them to filter the changes they receive to limit their processing, guarantee stable HTTP connections to ensure no data loss, and supply a more useful schema to limit the number of api calls they need to make per event.
The Enterprise Realtime API allows users to stream updates in real-time from any Wikimedia project.
- Streaming: Receive streaming updates (firehose) of every change as they occur in real-time
- Batch: Download compressed snapshot files of incremental updates every hour
- Instant updates for new content, any edits, deletions, and breaking news events including community-curated visibility changes
- Filtering of events by Project or Revision Namespace
- A wide range of commercial and consolidated schemas under SLAs with guaranteed connections
Snapshot API
For high volume reusers that currently rely on the Wikimedia Dumps to access our information, we have created a solution to ingest Wikimedia content in near real time without excessive API calls (On-demand API) or maintaining hooks into our infrastructure (Realtime).
The Enterprise Snapshot API allows users to retrieve entire Wikimedia projects as a database dump file.
- Download a compressed file containing everything in any project, in any language
- Article body in HTML as well as Wikitext
- Up to a daily snapshots cadence
- 24-hour JSON, Wikitext, or HTML compressed dumps of "text-based" Wikimedia projects
- A hourly update file with revision changes of "text-based" Wikimedia projects
- A wide range of commercial and consolidated schemas under SLAs
- SLA and Support
Contracted accounts receive 99% SLA and support response time guarantees. All accounts have access to our introductory onboarding resources and help center faqs.
Team
The Wikimedia Foundation staff who work specifically on this project:
Business
Product
-
Christopher Petrillo
Product Management -
Stephanie Delbecque
Product Management
Engineering
-
Ricardo Esquito
Software Engineering -
Luvo Dlulisa
Software Engineering -
Ruairi O'Donnell
Software Engineering -
Ehi Enabulele
Software Engineering
Program
Names in bold indicate management.
Many people from different teams also contribute significantly, including from the WMF Legal, Engineering, Partnerships, Design, Communications teams etc. Additional contract work provided by: PartnerHero provide customer support services; Vuurr are assisting our sales process; and Super Natural Design are the designers of the project website.
Governance
The board of the LLC overseeing the project are Ex officio from Wikimedia Foundation leadership, representing their Wikimedia Foundation staff roles. This includes the Chief Advancement Officer Lisa Seitz-Gruwell; General Counsel Stephen LaPorte; Chief Product and Technology Officer Selena Deckelman; and Lane Becker who serves as the LLC's president. The LLC is subject to the governance of the Wikimedia Foundation Board of Trustees as described at the Wikimedia Foundation Board Statement on Wikimedia Enterprise revenue principles .
All reports and official documents of the LLC are published on a dedicated Wikimedia Enterprise page on the Wikimedia Foundation Governance website. For convenience, annual reports are also linked here:
- พ.ศ. 2565 (calendar)
- พ.ศ. 2565-พ.ศ. 2566 (fiscal)
Press
| Commercial launch - October 2021 |
|---|
|
Wikimedia Foundation Press release Of particular note: Programmable Web
Daily API Roundup: Wikimedia, APM Terminals. Hot Stokes, Postnick
The Information
Wikimedia Foundation Asks Big Tech To Pay For Trove of Data
Golem
Wikipedia gets a commercial offer (Translated from German)
Linux-Magazin.de
Wikimedia Enterprise has a commercial offer (Translated from German)
|
See also
- API:Main page – MediaWiki Action API documentation
- Wikitech: Data Services portal – A list of community-facing services that allow for direct access to databases and dumps, as well as web interfaces for querying and programmatic access to data stores.
- Enterprise hub – a page for those interested in using the MediaWiki software in corporate contexts.
- MediaWiki Stakeholders group – an independent affiliate organisation that advocates for the needs of MediaWiki users outside the Wikimedia Foundation, including for-profit enterprises.
- Enterprise MediaWiki Conference – an independent conference series for that community.