# p09_nlp

**Repository Path**: cherishd/p09_nlp

## Basic Information

- **Project Name**: p09_nlp
- **Description**: No description available
- **Primary Language**: Unknown
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2026-02-05
- **Last Updated**: 2026-03-11

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# p08_image_processing

#### word_represent
```text
word_represent 资料下载:
1, 使用用公开词向量
sgns.weibo.word.bz2
词向量文件包含195202个词，每个词向量300维。
https://github.com/Embedding/Chinese-Word-Vectors?tab=readme-ov-file
https://pan.baidu.com/s/1zbuUJEEEpZRNHxZ7Gezzmw
2, 自行训练词向量
online_shopping_10_cats.csv
api参考:https://radimrehurek.com/gensim/models/word2vec.html
下载情感/观点/评论 倾向性分析,online_shopping_10_cats:
https://github.com/InsaneLife/ChineseNLPCorpus?tab=readme-ov-file

compl列表表达式, [ for  in] 
```
#### input-method
```text
# input-method 安装训练过程中,loss数据看板
conda install -c conda-forge tensorboard
tensorboard --logdir input-method/test/test_logs
# 按住alt 可以放大缩图片, 可以设置自动刷新
```
#### translation-seq2seq
```text
# translation-seq2seq 安装分词工具 nltk ,并下载词库
conda install -c conda-forge nltk
nltk.download('punkt_tab')
```

#### hugging-face
```text
# 见word文档附录部分, 有hugging-face子文档
conda install -c conda-forge transformers datasets jieba -y
需要下载bert-base-chinese词库
huggingface-cli download bert-base-chinese --local-dir ./pretrained/bert-base-chinese
国内环境下载
pip install modelscope
modelscope download --model google-bert/bert-base-chinese README.md --local_dir ./dir
https://hf-mirror.com/

还需要将pytorch 升级2.4版本以上, 可以新建一个conda 环境, 供参考
conda install -c pytorch -c conda-forge "pytorch>=2.4" cpuonly --force-reinstall --update-deps -y

尚硅谷AI大模型教程资料合集：
https://pan.baidu.com/s/1kB3jdw2oPHwQNGDJbSGlog?pwd=yyds 提取码: yyds  



```

#### 软件架构
软件架构说明


##12## 安装教程

1.  xxxx
```text


```
2.  xxxx
3.  xxxx

#### 使用说明

1.  xxxx
2.  xxxx
3.  xxxx

#### 参与贡献

1.  Fork 本仓库
2.  新建 Feat_xxx 分支
3.  提交代码
4.  新建 Pull Request


#### 特技

1.  使用 Readme\_XXX.md 来支持不同的语言，例如 Readme\_en.md, Readme\_zh.md
2.  Gitee 官方博客 [blog.gitee.com](https://blog.gitee.com)
3.  你可以 [https://gitee.com/explore](https://gitee.com/explore) 这个地址来了解 Gitee 上的优秀开源项目
4.  [GVP](https://gitee.com/gvp) 全称是 Gitee 最有价值开源项目，是综合评定出的优秀开源项目
5.  Gitee 官方提供的使用手册 [https://gitee.com/help](https://gitee.com/help)
6.  Gitee 封面人物是一档用来展示 Gitee 会员风采的栏目 [https://gitee.com/gitee-stars/](https://gitee.com/gitee-stars/)