金融学如何应对人工智能和大数据
大数据这是一个比较大的话题,同时涉及到了大数据和人工智能两个部分。从大数据角度谈了一下现阶段的发展对于金融行业的影响,作为一个在金融服务类公司从事AI相关的工作的人,我想从AI方面谈谈对于金融行业可能有什么影响。
上一个我不成熟的结论:
金融学是一个复杂的学科,在短时间内,很难被AI完全替代。在利润率较高、数据结构化较好、问题定义明确的一些方面,AI会大行其道。在不同金融领域的AI如果都能发展到一定程度时,或许能加速整个金融产业的AI发展。
在现阶段,金融公司所面临的数据结构化需求远远高于大数据要求。大量的历史数据还并未电子化,甚至现阶段大量金融公司新产生的数据都还属于不规范的格式。
对于金融人才来说,这个时代需要专精金融且能和计算机从业者顺畅沟通的人才。同时金融学的进一步发展也需要专业人才继续探索。因此金融完全是需要继续学的,但有所侧重的补充计算机知识可以为个人和社会带来更大的价值。
对于金融机构来说,有目的和计划的在合法的途径下收集、购买、或生成相关数据将会为未来企业发展带来巨大的优势。对于大型的金融机构/研究机构,应该继续加大在AI领域的投资,从内部培养跨金融和AI领域的人才,即使在短时间内不能产生直接利润。
1. 人工智能在金融学中的应用:
大量的机器学习模型已经被用于金融实践当中,比如利用机器学习进行风险预测或者假账/错账检测。更多的例子可以轻松的通过搜索引擎获得,如“人工智能+财务”。比较值得看的的行业动向包括各大金融服务类公司发布的展望,比如高盛去年年底发布的人工智能展望,机器之心有翻译其中的重要部分。答主本身也在 随着人工智能的进步,财务工作者会大批失业么?该如何应对? – 知乎 中提到了我们正在开发审计AI的进展与展望。
2. 为什么AI不能完全替代金融学的各种模型?
A. 无法很好的用AI来定义一个金融问题
现阶段比较被商业化广泛应用的机器学习还是监督学习,而监督学习要求有明确的问题定义。现在看起来很有希望的强化学习,迁移学习等还并不能大规模普及应用。
以简单的监督学习为例,如果你想建立一个模型来预测企业并购是否会影响公司股价,那么你需要提供大量并购数据,以及并购后股价是否发生了变动。理想情况下,在收集足够多的并购消息和股价变动信息后,做自然语言分析后提取特征放到机器学习模型里面就大功告成了。
然而在实际情况中:我们无法给出明确的问题定义和边界。如果想用AI来来制定一个股票交易策略,那么需要考虑进去多少因素?仅仅只考虑并购消息就够了么?越多的 相关的 因素越可以提高模型的拟合性和准确性。如宏观政策和微观的具体情况都会影响到股价的波动,漏掉其中哪一个都会造成一定的影响,往往是多多益善。在这种情况下,每个问题都需要大量人和数据来支撑,这也是为什么大量用AI来预测股票走势的探索都无疾而终的原因。
现阶段或者可预见的未来,在很多问题上不会出现这种明确的定义和范围。
B. AI从业者和金融从业者缺乏有效沟通
在很长的时间里面,计算机和金融学之间的联系相对比较薄弱。作为一个CS背景的人,我个人对于金融/经济学的理解还处于比较肤浅的状态,只理解基本的概念和原理。同样的,金融服务类从业者又缺乏对于AI模型和统计的了解。因此使用AI来推动金融学发展需要大量跨领域的人才,至少需要两个方向都懂的项目经理。
C. 金融领域缺乏足够的大数据和人工智能人才储备
人工智能的火爆,或者说06年Hinton论文后带起的深度学习的老树开花,并没有来得及为行业储存大量的专业人才。不难看出,大量一流AI/ML人才还是被互联网公司一网打尽,(Hinton在谷歌Lecun 在FB)留给金融服务类公司的人才并不多。以我们公司举例,各国分公司的Chief Data Scientist 基本都不是计算机/统计/数学背景出身的科学家。
D. 投出产出在现阶段不成正比,短时间内难以获得收益。在这种情况下,每个问题都需要大量人和数据来支撑。因此研究探索型的、不能产生利润的方向很少有公司来投资AI来进行研究的。换言之,有财力提供AI研究的金融公司不多,小型的金融机构或者学术机构又缺乏资源(资金,技术人才,数据积累)来进行相关系统的研究。
E. 技术性的难题还包括很多,比如AI在金融领域应该以什么样的模式存在?是一个软件,一个网络服务,还是一个机器人。在大量需要与客户沟通的领域,人机交互以及如何生成内容也是继续探索的领域。
3. 金融公司开发AI需要什么样的数据?
需要结构化的数据,至少是电子数据。像上面第二点A和B中谈到的,金融领域的大数据化,甚至是数据结构化都还有很长的路的要走。以审计为例,很多公司还有大量的票据都不能无纸化,更不要提AI能够消化的电子数据了。前一阵子我司开发一个面试AI,但是并没有原始数据可以直接使用。于是我们让12个刚入职的员工花了一周时间把我们保留的面试视频逐字逐句的转译到文字+特征,整个过程苦不堪言。
因此对于金融公司从现在起就应该继续大力推进数据电子化,在数据价格便宜的时候从其他公司购买数据。或许在不久的将来,数据的价格将会高到不可企及的程度。
4. 为什么还是要继续从事金融学研究?如何有所侧重的学习?
金融领域的AI化最需要的不是AI专家,也不是金融学者,而是懂AI的金融从业者。如果现阶段各行各业都因为人工智能火爆而转向这个方向,只会看到AI泡沫破灭后整个社会的一片狼藉。我们需要各个领域专家来告诉AI从业者行业的痛点,我们需要项目经理来领导各行各业的AI化。
对于已经从业的金融工作者,掌握一些基本的软件操作技能,遇到新的系统能很快上手,就可以了。至于专门花时间来学CS,甚至AI/ML,是不大必要的。毕竟最终留给金融从业者的入口不是数学模型或者代码,而是封装好的软件/APP/机器,不会要求过高的理化背景。更何况AI/ML的学习要求如线代统计概率等很多基础数学基础,自学起来的时间成本很高。
对于正在选择专业方向或者转型的年轻人来说,继续学习金融,探索未知的领域是一条正道。如果有条件的话,多吸收数据科学方向的知识,甚至可以读一个数据科学的副学位或者双学位。AI时代说到底,我们只要抱着开放的心,选择迎接新技术,成为最能接受改变那一小部分人,是永远都不会失业的。历史只会淘汰那些选择对抗,停滞不前的人:)
数据分析咨询请扫描二维码
需求持续增长 - 未来数据分析师需求将持续上升,企业对数据驱动决策的依赖加深。 - 预测到2025年,中国将需要高达220万的数据人 ...
2024-11-22《Python数据分析极简入门》 第2节 4 Pandas条件查询 在pandas中,可以使用条件筛选来选择满足特定条件的数据 importpanda ...
2024-11-22数据分析师的工作内容涉及多个方面,主要包括数据的收集、整理、分析和可视化,以支持商业决策和问题解决。以下是数据分析师的一 ...
2024-11-21数据分析师必须掌握的技能可以从多个方面进行归纳和总结。以下是数据分析师需要具备的主要技能: 统计学基础:数据分析师需要 ...
2024-11-21数据分析入门的难易程度因人而异,总体来看,入门并不算特别困难,但需要一定的学习和实践积累。 入门难度:数据分析入门相对 ...
2024-11-21数据分析是一项通过收集、整理和解释数据来发现有用信息的过程,它在现代社会中具有广泛的应用和重要性。数据分析能够帮助人们更 ...
2024-11-21数据分析行业正在迅速发展,随着技术的不断进步和数据量的爆炸式增长,企业对数据分析人才的需求也与日俱增。本文将探讨数据分析 ...
2024-11-21数据分析的常用方法包括多种技术,每种方法都有其特定的应用场景和优势。以下是几种常见的数据分析方法: 对比分析法:通过比 ...
2024-11-21企业数字化转型是指企业利用数字技术对其业务进行改造和升级,以实现提高效率、降低成本、创新业务模式等目标的过程。这一过程不 ...
2024-11-21数据分析作为一个备受追捧的职业领域,吸引着越来越多的女性加入其中。对于女生而言,在选择成为一名数据分析师时,行业选择至关 ...
2024-11-21大数据技术专业主要学习计算机科学、数学、统计学和信息技术等领域的基础理论和技能,旨在培养具备大数据处理、分析和应用能力的 ...
2024-11-21《Python数据分析极简入门》 第2节 3 Pandas数据查看 这里我们创建一个DataFrame命名为df: importnumpyasnpi ...
2024-11-21越老越吃香的行业主要集中在需要长时间经验积累和专业知识的领域。这些行业通常知识更新换代较慢,因此随着年龄的增长,从业者能 ...
2024-11-20数据导入 使用pandas库的read_csv()函数读取CSV文件或使用read_excel()函数读取Excel文件。 支持处理不同格式数据,可指定分隔 ...
2024-11-20大数据与会计专业是一门结合了大数据分析技术和会计财务理论知识的新型复合型学科,旨在培养能够适应现代会计业务新特征的高层次 ...
2024-11-20要成为一名数据分析师,需要掌握一系列硬技能和软技能。以下是成为数据分析师所需的关键技能: 统计学基础 理解基本的统计概念 ...
2024-11-20是的,Python可以用于数据分析。Python在数据分析领域非常流行,因为它拥有丰富的库和工具,能够高效地处理从数据清洗到可视化的 ...
2024-11-20在这个数据驱动的时代,数据分析师的角色变得愈发不可或缺。他们承担着帮助企业从数据中提取有价值信息的责任,而这些信息可以大 ...
2024-11-20数据分析作为现代信息时代的支柱之一,已经成为各行业不可或缺的工具。无论是在商业、科研还是日常决策中,数据分析都扮演着至关 ...
2024-11-20数字化转型已成为当今商业世界的热点话题。它不仅代表着技术的提升,还涉及企业业务流程、组织结构和文化的深层次变革。理解数字 ...
2024-11-20