MediaPipe 是研究人员和开发人员为移动、边缘、云和 Web 构建世界级 ML 解决方案和应用程序的最简单方法。
项目描述
布局:默认标题:首页 nav_order:1
随时随地进行机器学习
MediaPipe为直播和流媒体提供跨平台、可定制的 ML 解决方案。
端到端加速:内置快速 ML 推理和处理加速,即使在普通硬件上也是如此 | 一次构建,随处部署:统一解决方案适用于 Android、iOS、桌面/云、Web 和 IoT |
即用型解决方案:展示框架全部功能的尖端 ML 解决方案 | 免费和开源: Apache 2.0 下的框架和解决方案,完全可扩展和可定制 |
MediaPipe 中的机器学习解决方案
人脸检测 | 面网格 | 鸢尾花 | 手 | 姿势 | 整体的 |
---|---|---|---|---|---|
头发分割 | 物体检测 | 箱子追踪 | 即时运动追踪 | 奥伯龙 | 针织衫 |
---|---|---|---|---|---|
安卓 | iOS | C++ | Python | JS | 珊瑚 | |
---|---|---|---|---|---|---|
人脸检测 | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ |
面网格 | ✅ | ✅ | ✅ | ✅ | ✅ | |
鸢尾花 | ✅ | ✅ | ✅ | |||
手 | ✅ | ✅ | ✅ | ✅ | ✅ | |
姿势 | ✅ | ✅ | ✅ | ✅ | ✅ | |
整体的 | ✅ | ✅ | ✅ | ✅ | ✅ | |
自拍分割 | ✅ | ✅ | ✅ | ✅ | ✅ | |
头发分割 | ✅ | ✅ | ||||
物体检测 | ✅ | ✅ | ✅ | ✅ | ||
箱子追踪 | ✅ | ✅ | ✅ | |||
即时运动追踪 | ✅ | |||||
奥伯龙 | ✅ | ✅ | ✅ | ✅ | ||
针织衫 | ✅ | |||||
自动翻转 | ✅ | |||||
媒体序列 | ✅ | |||||
YouTube 8M | ✅ |
另请参阅 MediaPipe 模型和 用于在 MediaPipe 中发布的 ML 模型的模型卡。
入门
要开始使用 仅几行代码的 MediaPipe解决方案,请参阅Python 中的 MediaPipe 和 JavaScript 中的 MediaPipe 中的示例 代码和演示。
要在 C++、Android 和 iOS 中使用 MediaPipe,允许进一步定制解决方案以及构建您自己的解决方案,了解如何 安装MediaPipe 并开始构建 C++、 Android和 iOS示例应用程序。
源代码托管在 MediaPipe Github 存储库中,您可以使用 Google Open Source Code Search运行代码搜索。
出版物
- 在 Google 开发者博客中使用 AR 将艺术品变为现实
- 使用Google Developers Blog 中的MediaPipe 手部跟踪通过 Mirru 应用程序控制假肢
- SignAll SDK: Google Developers Blog 中的开发人员现在可以使用使用 MediaPipe 的手语界面
- MediaPipe Holistic -在 Google AI 博客中的设备上同时进行面部、手部和姿势预测
- Google Meet 中的背景功能,由 Google AI 博客中的 Web ML 提供支持
- 谷歌开发者博客中的MediaPipe 3D 人脸转换
- 在 Google 开发者博客中使用 MediaPipe 进行即时运动跟踪
- BlazePose - Google AI 博客中的设备上实时身体姿势跟踪
- MediaPipe Iris: Google AI 博客中的实时眼动追踪和深度估计
- MediaPipe KNIFT: 谷歌开发者博客中基于模板的特征匹配
- Alfred Camera: Google Developers Blog 中使用 MediaPipe 的智能相机功能
- Google AI 博客中使用 MediaPipe 在移动设备上进行实时 3D 对象检测
- AutoFlip: Google AI 博客中用于智能视频重构的开源框架
- Google 开发者博客中的 Web 上的 MediaPipe
- 在 Google Developers Blog 中使用 MediaPipe 进行对象检测和跟踪
- 在 Google AI 博客中使用 MediaPipe 在设备上进行实时手部跟踪
- MediaPipe:构建感知管道的框架
视频
活动
- MediaPipe 西雅图聚会,Google Building Waterside,2020 年 2 月 13 日
- AI Nextcon 2020,2020 年 2 月 12 日至 16 日,西雅图
- MediaPipe 马德里聚会,2019 年 12 月 16 日
- MediaPipe London Meetup,Google 123 大楼,2019 年 12 月 12 日
- ML 会议,柏林,2019 年 12 月 11 日
- MediaPipe 柏林聚会,谷歌柏林,2019 年 12 月 11 日
- YouTube-8M大规模视频理解研讨会第三届研讨会,韩国首尔ICCV 2019
- AI DevWorld 2019,2019 年 10 月 10 日,加利福尼亚州圣何塞
- 2019 年 ICIP 2019 谷歌产业研讨会,2019 年 9 月 24 日,台湾台北 (演讲)
- 在 CVPR 2019 开源,6 月 17 日至 20 日,加利福尼亚州长滩
社区
- Awesome MediaPipe - 很棒的 MediaPipe 相关框架、库和软件的精选列表
- MediaPipe 用户的Slack 社区
- 讨论- 围绕 MediaPipe 的一般社区讨论
阿尔法免责声明
MediaPipe 目前在 v0.7 处于 alpha 阶段。我们可能仍在对 API 进行重大更改,并期望在 v1.0 之前获得稳定的 API。
贡献
我们欢迎贡献。请遵循这些 准则。
我们使用 GitHub 问题来跟踪请求和错误。请使用标签将问题发布到 MediaPipe Stack Overflow mediapipe
。
项目详情
下载文件
下载适用于您平台的文件。如果您不确定要选择哪个,请了解有关安装包的更多信息。
内置发行版
mediapipe-0.8.11-cp39-cp39-win_amd64.whl
(49.0 MB
查看哈希)
mediapipe-0.8.11-cp38-cp38-win_amd64.whl
(49.0 MB
查看哈希)