简介：这是一套面向计算机相关专业学生与项目实战学习者的中文情感分析完整方案，以酒店评论为分析对象，基于Python实现从文本预处理到情感判别的全流程，可作为毕业设计、课程设计或期末大作业的参考项目。压缩包共约2000个文件，以txt格式的酒店评论语料为主，涵盖正面与负面样本，另含1个Python主程序脚本，整体约1.77MB，体量轻便、便于本地运行与二次开发。目前已有361人学习下载，说明该方案在同类课设中具有一定参考价值。资源经过实际运行测试，配套设计文档与数据集齐全，读者可据此理解中文分词、停用词过滤、特征降维与分类模型等关键环节，并在此基础上替换语料或调整算法，完成自己的情感分析任务，适合需要快速搭建可运行项目、积累文本挖掘经验的学习者。
1. 酒店评论情感分析：从一堆中文差评里挖出可落地的运营信号
酒店评论区的文本量一旦上千条，人工翻看就彻底失效了。一条“隔音差到凌晨三点没睡着”和一条“前台小姐姐帮我升级了房型”，对运营的价值完全不同，但它们在数据库里都只是两段字符串。基于 Python 的酒店评论中文情感分析系统，要解决的就是把这种非结构化文本批量转成可统计、可对比、可追踪的情感标签，让运营知道哪类问题在集中爆发、哪个门店的口碑在滑坡。这套东西适合有基础 Python 能力、手头有评论数据、想快速搭一套可复现流程的从业者。它不追求发论文级别的模型精度，追求的是从原始 CSV 到情感分布报表这条链路能跑通、能解释、能迭代。下面按“数据怎么洗、模型怎么选、代码怎么写、坑怎么避”的顺序拆开讲。
2. 数据与标签：中文酒店评论的清洗和标注怎么做才不返工
2.1 先看清数据长什么样，再决定清洗策略
酒店评论数据的典型字段是：评论正文、评分（1～5 星）、入住时间、房型、门店。情感分析的第一步不是建模，而是确认评论正文和评分之间能不能形成弱监督关系。常见做法是把 4～5 星映射为正向、1～2 星映射为负向、3 星单独拿出来做中性或直接丢弃。这个映射不是拍脑袋，要先做分布统计，看 3 星占比是否过高。如果 3 星占到三成以上，强行二分类会把大量模糊样本塞进两个极端，模型学到的边界会很脏。
清洗环节要处理的东西比想象中多。中文酒店评论里高频出现的有：表情符号、重复标点（“太差了！！！”）、无意义灌水（“哈哈哈哈”“好评”）、以及夹杂的英文和数字。我的习惯是先做一轮字符级过滤，再做长度过滤。长度低于 5 个字的评论基本没有情感信息量，直接剔除；长度超过 500 字的超长评论往往是投诉长文，保留但要在建模时注意它可能主导损失函数。
import pandas as pd import re def clean_hotel_review(text): if not isinstance(text, str): return "" # 去掉 URL 和邮箱 text = re.sub(r'http\S+|www\.\S+|\S+@\S+', '', text) # 只保留中文、英文、数字和基本标点 text = re.sub(r'[^\u4e00-\u9fa5a-zA-Z0-9，。！？、；：]', '', text) # 压缩重复标点 text = re.sub(r'([！？。，])\1+', r'\1', text) return text.strip() df = pd.read_csv("hotel_reviews.csv") df["clean_text"] = df["content"].apply(clean_hotel_review) df = df[df["clean_text"].str.len() >= 5] df["label"] = df["score"].apply(lambda x: 1 if x >= 4 else (0 if x <= 2 else -1)) df = df[df["label"] != -1] print(df["label"].value_counts())这段代码的逻辑是：先做字符级清洗，再做长度过滤，最后用评分生成弱监督标签。参数上，长度阈值 5 是个经验值，可以按实际数据分布调整；标点压缩的正则只处理连续重复，不会误伤正常标点。跑完这一步，你会得到一份带clean_text和label两列的数据，后续所有模型都在这份数据上迭代。
2.2 标注一致性比标注数量更致命
如果要做人工标注补充，最大的坑是标注员对“中性”的理解不一致。同一条“房间还行，早餐一般”，有人标正向，有人标负向。解决办法是先写一份标注手册，把边界案例固定下来，比如“整体评价偏正面但提到一个具体缺点”统一标正向。然后做一轮双人标注，算 Kappa 系数，低于 0.6 就回去改手册。这个环节看起来慢，但能省掉后面反复调模型的时间。我见过太多团队跳过这一步，最后模型在验证集上表现很好，一上线就翻车，因为验证集的标签本身就是乱的。
3. 模型选型：在中文酒店评论上，BERT 和传统方法怎么选
3.1 传统方法不是不能用，而是要知道它的边界
TF-IDF 加逻辑回归或 SVM，在酒店评论这种领域相对固定的场景下，其实能拿到不差的基线。它的优势是训练快、可解释、对硬件要求低。缺点是它对否定和转折的处理很弱。“不推荐”和“推荐”在词袋里只差一个字，但情感完全相反。如果你的数据量在几千条以内，且评论句式比较规范，传统方法完全够用。我的建议是先用它跑一个基线，把准确率和 F1 记下来，再决定要不要上预训练模型。
from sklearn.feature_extraction.text import TfidfVectorizer from sklearn.linear_model import LogisticRegression from sklearn.model_selection import train_test_split from sklearn.metrics import classification_report X_train, X_test, y_train, y_test = train_test_split( df["clean_text"], df["label"], test_size=0.2, random_state=42, stratify=df["label"] ) vectorizer = TfidfVectorizer(max_features=5000, ngram_range=(1, 2)) X_train_vec = vectorizer.fit_transform(X_train) X_test_vec = vectorizer.transform(X_test) clf = LogisticRegression(max_iter=1000, C=1.0) clf.fit(X_train_vec, y_train) y_pred = clf.predict(X_test_vec) print(classification_report(y_test, y_pred))这里max_features=5000控制词表大小，ngram_range=(1,2)让模型能捕捉“不推荐”这种二元组合。C=1.0是正则强度，数据量小的时候可以调到 0.5 以下防止过拟合。跑完看classification_report，重点看负向的召回率，因为差评漏检的代价通常比误检高。
3.2 预训练模型怎么用才不浪费算力
中文预训练模型在酒店评论上的优势主要体现在对上下文和否定结构的理解。但直接拿大模型全量微调，对大多数团队来说成本太高。更实际的做法是冻结底层，只训练分类头，或者用更小的蒸馏版本。常见做法是取预训练模型的前若干层输出，接一个池化层和全连接层。训练时学习率要设小，通常 2e-5 到 5e-5 之间，太大容易把预训练学到的语言知识冲掉。
import torch from torch.utils.data import Dataset, DataLoader from transformers import AutoTokenizer, AutoModelForSequenceClassification class ReviewDataset(Dataset): def __init__(self, texts, labels, tokenizer, max_len=128): self.texts = texts self.labels = labels self.tokenizer = tokenizer self.max_len = max_len def __len__(self): return len(self.texts) def __getitem__(self, idx): encoding = self.tokenizer( self.texts[idx], truncation=True, padding="max_length", max_length=self.max_len, return_tensors="pt" ) return { "input_ids": encoding["input_ids"].squeeze(), "attention_mask": encoding["attention_mask"].squeeze(), "labels": torch.tensor(self.labels[idx], dtype=torch.long) } tokenizer = AutoTokenizer.from_pretrained("bert-base-chinese") model = AutoModelForSequenceClassification.from_pretrained("bert-base-chinese", num_labels=2)max_len=128对酒店评论通常够用，超过这个长度的评论会被截断，如果长评论占比高，可以调到 256。num_labels=2对应正向和负向。训练时用 AdamW，学习率 3e-5，batch size 16 或 32，跑 3 到 5 个 epoch 就够。注意要在验证集上做早停，别等训练损失降到很低才停，那时候已经过拟合了。
4. 避坑与排查：酒店评论情感分析里最容易翻车的五个地方
4.1 评分映射把中性评论强行二分类
现象是模型在验证集上准确率虚高，但实际预测时把大量“还行”“一般”判成负向。原因是 3 星评论被强行归入某一类，标签本身就有噪声。解决方法是把 3 星单独作为中性类，做三分类，或者在二分类时直接剔除 3 星样本。我一般会先看 3 星占比，超过 20% 就做三分类。
4.2 清洗过度把情感词也洗掉了
现象是清洗后文本变短，但模型效果反而下降。原因是正则写得太狠，把“不”“没”这类否定词或者表情符号一起过滤了。解决方法是清洗规则要逐条验证，每加一条规则就在小样本上看一遍输出。否定词和程度副词必须保留。
4.3 训练集和测试集分布不一致
现象是离线指标很好，上线后差评漏检严重。原因是训练集来自历史数据，测试集来自近期数据，而酒店评论的用词会随时间变化。解决方法是按时间切分训练集和测试集，而不是随机切分。如果数据量允许，留出最近一个月的评论做测试。
4.4 类别不平衡导致负向召回率低
现象是正向评论识别很准，负向评论大量漏检。原因是正向评论通常远多于负向评论。解决方法是训练时给负向样本更高的权重，或者在损失函数里用 focal loss。也可以在采样时对负向样本做过采样，但要注意别过采样到过拟合。
4.5 模型输出没有校准，概率不可信
现象是模型输出的概率值集中在 0.5 附近，很难设定阈值。原因是交叉熵损失训练出来的模型概率往往偏乐观。解决方法是做温度缩放或者 Platt scaling，在验证集上拟合一个校准参数。这样输出的概率才能直接用于业务决策，比如“概率低于 0.3 的评论转人工复核”。
5. 从模型到报表：把情感分析结果变成运营能看的指标
5.1 按门店和时间维度聚合情感分数
模型跑完只是得到每条评论的标签和概率，真正有价值的是聚合。我的习惯是算一个情感净值：正向评论数减去负向评论数，再除以总评论数。这个值按门店、按周聚合，就能看出哪个门店在恶化。注意要设置最小评论数阈值，评论数太少的门店波动大，容易误判。
def sentiment_score(df): df["sentiment_value"] = df["label"].apply(lambda x: 1 if x == 1 else -1) agg = df.groupby(["store_id", "week"]).agg( total=("sentiment_value", "count"), net=("sentiment_value", "sum") ).reset_index() agg["net_ratio"] = agg["net"] / agg["total"] agg = agg[agg["total"] >= 10] return aggtotal >= 10是过滤小样本，避免偶然波动被当成趋势。net_ratio的范围是 -1 到 1，越接近 1 说明口碑越好。这个指标可以直接进周报，比单纯看平均分更敏感。
5.2 用关键词提取定位具体问题
情感标签告诉你“好不好”，但运营还需要知道“哪里不好”。常见做法是在负向评论上跑 TF-IDF 或者 TextRank，提取高频关键词。更细一点的做法是按房型、按时间段分别提取，这样能发现“某房型在夏季空调问题集中”这种具体结论。关键词提取的结果要人工过一遍，去掉“酒店”“房间”这种无信息量的词。
6. 一个可复现的验证习惯：用混淆矩阵和错误样本反推数据问题
模型训练完，别只看准确率和 F1。我习惯做两件事：一是画混淆矩阵，看错误集中在哪个方向；二是把预测错误的样本按概率排序，挑出置信度高但预测错的，逐条看。这些样本往往暴露的是数据问题，而不是模型问题。比如某条评论明明是差评，但评分是 5 星，这种标签噪声在混淆矩阵里会表现为负向样本被大量判成正向。发现之后回去修标签，比调模型参数有效得多。
from sklearn.metrics import confusion_matrix import seaborn as sns import matplotlib.pyplot as plt cm = confusion_matrix(y_test, y_pred) sns.heatmap(cm, annot=True, fmt="d", cmap="Blues") plt.xlabel("Predicted") plt.ylabel("Actual") plt.show() # 找出预测错误且概率高的样本 proba = clf.predict_proba(X_test_vec) errors = [] for i, (true, pred) in enumerate(zip(y_test, y_pred)): if true != pred: errors.append((proba[i].max(), true, pred, X_test.iloc[i])) errors.sort(reverse=True) for conf, true, pred, text in errors[:10]: print(f"置信度 {conf:.2f} 真实 {true} 预测 {pred} 文本 {text[:50]}")这段代码先画混淆矩阵，再把错误样本按置信度排序。置信度高但预测错的样本，大概率是标签有问题或者文本本身有歧义。我一般会把这些样本单独拉出来，人工复核一遍，如果确认是标签错误就修正，然后重新训练。这个习惯坚持下来，模型迭代的方向会清晰很多，不会陷入盲目调参。
最后说一个我自己的教训：早期做这套系统时，我花了两周调模型结构，效果提升不到两个点。后来花了一天检查标签，发现 8% 的样本标签是错的，修正之后效果直接涨了五个点。数据质量永远比模型结构重要，希望帮到你。
本文还有配套的精品资源，点击获取
)
)
