普通版降重
You can not select more than 25 topics Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.
majiahui@haimaqingfan.com 02f379efb4 V1.0完成 2 years ago
data_do V1.0完成 2 years ago
new_data_logs V1.0完成 2 years ago
优化点 第一次提交,非batch预测版本 2 years ago
改进方案 第一次提交,非batch预测版本 2 years ago
.gitignore 第一次提交,非batch预测版本 2 years ago
11篇_xlsx2txt.py 完成t5单条预测版本 2 years ago
README.md 完成t5单条预测版本 2 years ago
bert_config_dropout_0_3.json 第一次提交,非batch预测版本 2 years ago
bert_config_dropout_0_4.json 第一次提交,非batch预测版本 2 years ago
ceshi10000.py V1.0完成 2 years ago
chuli_yy_data.py 第一次提交,非batch预测版本 2 years ago
crontab_sh.sh V1.0完成 2 years ago
eval_yylable.py 第一次提交,非batch预测版本 2 years ago
evaluate_test.py 完成batch预测版本 2 years ago
flask_predict.py 完成batch预测版本 2 years ago
flask_predict_no_batch.py 第一次提交,非batch预测版本 2 years ago
flask_predict_no_batch_t5.py V1.0完成 2 years ago
flask_predict_redis.py V1.0完成 2 years ago
flask_predict_t5.py V1.0完成 2 years ago
gunicorn_check_uuid_config.py V1.0完成 2 years ago
gunicorn_config.py V1.0完成 2 years ago
predict_11pian.py 完成t5单条预测版本 2 years ago
predict_11pian_random.py 第一次提交,非batch预测版本 2 years ago
predict_11pian_sim_sim.py 第一次提交,非batch预测版本 2 years ago
predict_batch.py 完成batch预测版本 2 years ago
predict_drop_sim_sim.py 第一次提交,非batch预测版本 2 years ago
predict_drop_weight_sim.py 第一次提交,非batch预测版本 2 years ago
predict_sim.py 完成batch预测版本 2 years ago
predict_t5.py V1.0完成 2 years ago
predict_tf25.py 第一次提交,非batch预测版本 2 years ago
predict_tf_sim.py 第一次提交,非batch预测版本 2 years ago
predict_txt.py 第一次提交,非batch预测版本 2 years ago
predict_yinhoa.py 第一次提交,非batch预测版本 2 years ago
python_to_redis.py V1.0完成 2 years ago
redis_check_uuid.py V1.0完成 2 years ago
request_drop.py V1.0完成 2 years ago
run_app.sh 第一次提交,非batch预测版本 2 years ago
run_app_flask.sh V1.0完成 2 years ago
run_app_nohub_search_redis.sh V1.0完成 2 years ago
run_app_nohub_t5.sh V1.0完成 2 years ago
run_check_uuid_app.sh V1.0完成 2 years ago
simbert_train.py 第一次提交,非batch预测版本 2 years ago
simbert_train_dropout.py 第一次提交,非batch预测版本 2 years ago
task_seq2seq_autotitle.py 第一次提交,非batch预测版本 2 years ago
task_seq2seq_t5.py V1.0完成 2 years ago
测试range_1.py 第一次提交,非batch预测版本 2 years ago
筛选引号数据.py 第一次提交,非batch预测版本 2 years ago

README.md

小说改写项目

基于unilm模型的生成式任务,使用keras框架,数据处理脚本在data_do文件夹下 训练数据 train_cat_data_4.txt

训练

加入了质量检测训练:bash train.sh
加入了质量检测训练:bash train_sim.sh

预测

加入了质量检测 python predict_tf_sim.py
未加入质量检测 python predict_tf.py

API serve

目前的启动方式:bash run_app.sh
一键启动方式:bash run_app_gunicorn.sh

请求示例

requests.post(
    "http://192.168.1.17:14000",
    json={"texts": ["张三要爬上高位的,才能够翻云覆雨。"]},
    timeout=1000
)

响应

{'probabilities': None, 'texts': ['张三要上了巅峰,他就可以为所欲为了。']}