NLP训练语料库的预处理
项目描述
原型
如何引用
@software{thibault_clerice_2020_3883586,
author = {Thibault Clérice},
title = {Protogenie, post-processing for NLP dataset},
month = jun,
year = 2020,
publisher = {Zenodo},
doi = {10.5281/zenodo.3883585},
url = {https://doi.org/10.5281/zenodo.3883585}
}
从发行版安装
pip install protogenie
安装不稳定
pip install --upgrade https://github.com/hipster-philology/protogenie/archive/master.zip
从源安装
首先克隆存储库，然后在创建的文件夹中移动
git clone https://github.com/hipster-philology/protogenie.git
cd protogenie/
创建一个虚拟环境，获取它并运行
pip install -r requirements.txt
配置文件
要进行配置，您可以查看./tests/test_config中的示例，但更一般地说，您可以并且应该使用架构：./ppa_splitter /schema.rng
工作流程
下载文件
下载适用于您平台的文件。如果您不确定要选择哪个，请了解有关安装包的更多信息。
源分布
protogenie-0.0.4.tar.gz
（20.6 kB
查看哈希）
内置分布
protogenie-0.0.4-py2.py3-none-any.whl
(22.8 kB
查看哈希)
关
protogenie -0.0.4.tar.gz 的哈希值
| 算法 | 哈希摘要 | |
|---|---|---|
| SHA256 | dff3c0f6d58e049cf25b746455e8f78741a1a1375c568c5d5514d4d85e384871 |
|
| MD5 | dfaf744e742f042f0cb44376c8045713 |
|
| 布莱克2-256 | 1a888c0635ec22afad8c6bb9a710086eca7d1597f8072e7ca1b180897588a3c5 |
关
protogenie -0.0.4-py2.py3-none-any.whl 的哈希值
| 算法 | 哈希摘要 | |
|---|---|---|
| SHA256 | b3207afba27168d59178d1324f4579fd21c2740fbf9cb584161af295b19ee5a9 |
|
| MD5 | feb4ca12cfa1adf9853d73b525cf2a30 |
|
| 布莱克2-256 | 4d4f144ddc2e9c4dfa952a8afa8149a5fcfae94751ea4b56ce53944f4422982b |