论证券公司数据的采集与数据可视化

许文妮

【摘要】在我国经济体制改革的进一步深化之下，证券市场基本上实现了自由发展，越来越多的证券公司涌入市场，为证券市场的可持续发展带来了全新的生机与活力，但其也在一定程度上加剧了证券市场的竞争。因此许多证券公司选择通过提升自身的科学决策能力，采用信息化的手段主动采集证券公司的各类信息数据，并运用可视化技术对其进行充分运用，进而以更加直观形象的方式帮助相关领导能够准确掌握证券公司的业务发展变化以及运行情况。在此背景之下，本文将通过简单介绍数据可视化技术和数据挖掘技术，对证券公司数据可视化分析系统的设计实现进行简要分析研究。

【关键词】证券公司 数据采集 可视化数据

通过积极融合数据可视化技术和数据挖掘技术，构建起证券公司数据可视化分析系统，能够使用专业的数据库工具自动采集和分析整理证券公司当中的客户信息、交易数据等信息数据。并利用可视化的技术将最终的分析结果以图表等形式展示出来，使得证券公司能够更加全面地了解自身的发展情况，为其之后的业务发展等方面的决策决断提供有效的参考依据。因此研究证券公司数据的采集以及数据可视化具有十分重要的现实意义。

一、数据可视化与数据挖掘的简要概述

（一）数据可视化技术

笔者通过查阅大量的相关文献资料了解到，目前大多数专家学者认为数据可视化技术指的就是通过利用包括计算机技术、图形学技术等在内的各种科学技术，将数据及其分析结果转化成图形的方式，并最终在电子屏幕当中进行显现。简单来说数据可视化技术就是将数据信息从原本的符号描述转化成几何描述，进而使得人们能够以一种更加直观形象的方式掌握数据的方针以及计算结果，并在此基础之上对数据信息进行深入的挖掘分析和预测预判。而通过发展数据可视化技术能够在有效提升数据处理速度的基础之上，使得人们能够通过图表等直观形象的方式了解数据信息之间的隐含信息及内在规律，从而为自身的决策决断提供必要参考。

（二）数据挖掘技术

在进行数据分析的过程当中数据挖掘占据着至关重要的地位，所谓的数据挖掘，简单来说就是根据具体需要从海量的信息数据当中挖掘出最具价值和最需要的信息数据。数据挖掘涉及众多学科知识以及工具技术，因此具有一定的复杂性。对于证券公司而言，其利用数据挖掘技术进行客户信息、交易数据等采集，就是通过结合公司自身的业务目标和商业目的，从众多信息数据当中采集最为关键和重要的信息数据并对其进行深入分析，以有效掌握其中蕴含的内在联系以真正含义。而将数据采集与数据可视化技术进行有机结合，能够在快速完成数据采集与分析转换的同时，有效将其转化成直观明了的图片、图表，进而帮助证券公司大大提升信息资源的利用成效。

二、证券公司数据可视化分析系统的设计实现

（一）数据采集

由于证券公司当中涉及的信息内容众多，不仅包含客户数据信息和公司数据信息，同时还设计沪深指数等其他方面的信息数据，因此证券公司往往会在准备数据上花费大量的时间与精力。因此为有效完成数据采集和分析处理工作，许多证券公司开始尝试运用数据库工具建立数据采集系统。

1.采集客户数据

证券公司在多年的发展经营当中积累了大量的客户信息资料以及其买卖股票和存取资金的记录凭证信息等，但在以往采集客戶数据的过程中发现，部分账户上的股民信息与实际操作者之间有着较大出入，因此此类采集到的信息并无任何实际意义。因此笔者认为在设计的证券公司数据可视化分析系统的数据采集子系统当中，可以通过立足分析数据的真实目的，将客户账户的盈亏情况、客户总资金额和股票市值金额、存取现金和支票的频率等各种能够真实反映操作行为的信息数据内容作为采集对象，利用当前比较常用的SQL数据库等相关工具进行采集，并在证券公司数据库当中根据数据的具体分类，专门建立相应的库表。譬如说客户资金流水表、客户基本信息表等。

2.采集营业部数据

利用采集客户数据的方式，在证券公司数据采集子系统当中还需要完成营业部数据信息的采集，首先工作人员需要按照具体属性汇总营业部当中的客户数据，并继续利用数据库工具完成客户资产总值、交易品种汇总等数据的计算与转换，进而生成证券公司的营业部数据。而根据我国证券业协会发布的相关数据显示，去年我国129家证券公司的全年营业收入将近3280亿元，其中代理买卖证券和保荐业务是证券公司的主营业务，占据着公司收人来源的“半壁江山”，而财务顾问业务、投资咨询业务等紧随其后，在这129家证券公司当中只有三家出现亏损的情况，其余证券公司全部实现盈利，其总资产加在一起累计超过6万亿元，净资产和净资本分别为1.6万亿元和1.5万亿元，而托管证券市值也超过了33万亿元。

3.采集公司数据

而对公司数据的采集其实就是再一次对证券公司营业部的数据进行采集和汇总处理。并在此基础之上根据真实的数据信息，利用SQL数据库工具自动生成该证券公司每日的客户数量，并为公司的客户资产总值等生产相应的库表。譬如说以笔者所在地的一家证券公司为例，根据公司当中的数据采集系统显示，截至去年年末该争取拿公司的新增开户数为7211个，新增资产超过1200万元，交易量达到了20亿元，证券公司净利润从2014年的2488万增加至了2050万元。

4.采集沪深指数

对沪深指数的采集同样也是证券公司数据采集的一项重要工作，公司的数据采集子系统每天都需要采集上海股市和深圳股市的开盘指数、收盘指数，股市的最高与最低指数以及成交量、成交金额等等。由于当前市面上的同花顺等行情交易软件当中均可以显示沪深股市指数，而在交易数据库当中，从股票价格表当中也可以直接获取相关信息数据，因此证券公司在采集沪深指数方面并没有较大难度。下表展示的就是证券公司在昨日采集的沪市指数情况：

（二）数据可视化

1.分析客户数据endprint

在使用可视化数据技术分析客户数据的过程当中，需要根据营业部给出的客户信息表，按照证券公司营业部资产为总资金加证券市值，以及交易量和客户数量等分类求和，从而运用数据库工具自动完成不同类别客户数量占比的精确计算，并运用饼图或是环图将其表现出来。而在分析客户价值分类的过程当中也基本如此，在客户信息表的基础之上，依次对客户的数量、资金、资金存取的次数以及差额等进行平均值计算，并按照期间产生的佣金数额进行排序，选择其中前1%的作为关键客户，前4%的作为重要客户，而前15%的则为主要客户，剩余客户即为小客户，按照其采集的信息数据对客户进行分类，能够使得证券公司日后的业务发展等更加具有针对性和明确指向性。

2.分析营业部数据

在利用可视化数据技术对证券营业部数据进行分析的过程当中，其需要通过充分数据采集系统得到的营业部数据统计表，将不同委托上市和交易品种、客户保证金及市值等数据进行逐一取出，而后按照相应的计算方式统计出具体占比，最后通过运用饼图或是环图进行直接表示。如果是对客户资金市值走势等相关数据进行可视化分析，则应当使用折线图等进行直接展示。

以笔者选取的某证券公司为例，根据其数据采集系统得到的数据显示，在去年一年当中营业部中有超过60%的客户没有任何交易行为，在营业部客户总资产当中此类“休眠资产”的占比将近40%，而其中有13.57%为没有任何资产和交易的“死户”，还有不到1%的有交易但没有期末资产的账户，户主将现有股票全部抛售套现之后直接选择离场。而通过进一步的分析我们可以得知在该证券公司当中只有23.96%的客户真正为营业部创造的利润价值，因此利用数据可视化技术显示出的客户分布图（如图l所示）使得营业部将工作重点转移至这23.96%的客户身上，主动为其提供相关的咨询服务，致力于帮助其进一步提升盈利能力。而另外证券公司的工作人员还尝试将这大约40%的客户从“休眠”状态中唤醒，其通过积极展开电话回访、邮件回访，主动将当前股市最新的动态情况传递至客户处，积极帮助其看准时机进行换股，从而有效增强资产的流动性。

3.分析公司数据

对公司数据进行可视化数据分析，即主要通过公司分析的比例图和趋势图以及各个营业部的对比图，对证券公司的委托方式、交易品种、客户类别等比例以及趋势进行明确分析，并在比较各个营业部的资金与市值以及开户数等基础之上，判断证券公司的具体运行情况，由此完成对证券公司未来发展方向的明确制定。而在分析公司数据的过程当中通常需要利用营业部的信息统计表以及沪深指数表，同时根据不同图表的相关要求，将与之相对应的数据进行一一取出合计之后，按照数值的大小顺序进行重新排序，从而有效完成公司数据的可视化分析。

以国金证券股份有限公司为例，笔者通过从互联网上获取其近三个月的相关信息数据，发现买入次数最多的营业部为上海奉贤区金碧路证券营业部，其买人次数多达177次，上涨概率为31.07%，而紧随其后的便是上海互联网证券分公司，其买入次数为109次，平均涨幅为一1.81%，上涨概率为33.94%。根據其采集和分析的数据结果来看，地处我国东部沿海地区经济比较发达的营业部，排名相对比较靠前，拥有的开户数也更多，而此类营业部的资金以及市值的总和在整个证券公司当中的占比也相对比较大。另外在对资产周转率进行分析的过程中，根据相关图表显示上海奉贤区金碧路证券营业部和上海互联网证券分公司的资产相差并不明显，但前者的换手率要略高，因此交易总量也要更多，其资产周转率则略高一筹。而在证券市场当中，营业部的资产周转率越高，其拥有的客户也更活跃，股票换手率也将随着资产周转率的提升而有所增加，营业部将更有更多高价值客户。

三、结束语

总而言之，本文通过在数据挖掘和数据可视化的基础之上，尝试设计了一种证券数据可视化分析系统，在这一系统当中数据采集子系统能够通过借助数据库工具，自动完成证券公司各项信息数据的采集分析工作。而系统当中数据可视化分析系统则能够将相关数据分析结果以图表等方式立体、直观地展现出来，进而使得客户和证券公司领导可以直接掌握客户信息、营业部信息以及整个证券公司的运行信息等，为各项决策决断的制定以及公司未来发展方向的指明提供有效指导。endprint