本发明公开了动态维护优质科技概念库的人机合作系统，基于性能优异的自动术语提取(ATE)算法TERMATE，针对科技概念更新快与优秀算法耗时长的矛盾和痛点，设计了一套基于增量运转和人机合作的完备科技概念库维护框架，并且最终在此基础上实现了线上闭环语料利用系统。上述系统中：定制化提取算法对涌入的语料进行有机整合式ATE，以富集出术语候选并汇报日志；汇集众智的众包平台对候选进行确认与完善，以得到术语与概念并自适应结算奖励；确认的候选将反过来增益ATE性能。整套系统名为ConceptEST或最概念，无缝整合机器智能与群体智慧、富集优质科技知识，方便领域术语、概念管理，从而能低成本、高效率地跟进所关注的领域变化，方便领域从业者。