① 怎样做好数据调研
一 业务调研
数据仓库是要涵盖所有业务领域,还是各个业务领域独自建设,业务领域内的业务线也同样面临着这个问题。所以要构建大数据数据仓库,就需要了解各个业务领域、业务线的业务有什么共同点和不同点,以及各个业务线可以细分为哪几个业务模块,每个业务模块具体的业务流程又是怎样的。业务调研是否充分,将会直接决定数据仓库建设是否成功。
二 需求调研
了解业务系统的业务后不等于说就可以实施数仓建设了,还需要收集数据使用者的需求,及找分析师、运营人员、产品人员等了解他们对数据的诉求。通常需求调研分下面两种途径:
1. 根据与分析师、运营人员、产品人员的沟通获取需求。
2. 对现有报表、数据进行研究分析获取数据建设需求。
三 数据调研
前期需要做好数据探查工作,需要了解数据库类型,数据来源,全量数据情况及数据每年增长情况,更新机制;还需要了解数据是否结构化,是否清洗,是接口调用还是直接访问库,有哪些类型的数据,数据结构之怎样的。
数据开发,模型建设之前,先了解数据结构,数据内容,数据特性,对数据有一个整体把控
探查一下本次需求能不能实现,怎么实现,有没有隐藏bug,数据质量如何
② 在市场调研过程中如何保证信息的真实可靠
市场调研在企业营销管理过程中扮演着两种重要角色:
首先,它是市场情报反馈过程的一部分,向企业决策者提供关于当前产品/服务营销组合有效性的信息和进行必要变革的线索和支撑;
其次,它是探索新的市场机会的基本工具。市场细分调研、消费者洞察等都有助于企业识别最有利可图的市场机会。
然而,数据采集作为市场调研工作的核心基础,它是决定调研最终结果有效性和完整性的重要基石,因此在开展一场调研工作之时,对于执行过程的质量把控是尤为关键。恒诺市场研究结合十多年的满意度研究和消费者洞察经验,总结出以下几个对数据结果质量把控的关键要点:
1、 对访问员筛选、任用、培训环节严格要求
对调研执行的访问员,要求至少有三个以上的相关行业的项目访问经验,并且所有访问员必须在项目执行前经过严格培训,合格者方可进入到项目中执行。同时,在正式进行访问前必须先进行试访,以实战方式熟悉了解整体访问的过程及执行标准,确保正式执行时,每个样本的有效性和完整性。
2、 对数据采集过程把控的毫不松懈
在正式调研中,现场设有督导,做到100%陪访,实时监控访问过程,对现场进行审核并拍照取证,当场指出过程中的问题点及时纠偏,防止出现访问员作弊、诱导答题等情况发生。
同时,所有访问问卷,督导会现场完成第一次审核,检查样本非硬性设定的问卷逻辑性错答情况,减少访问错误率,一旦发现有非硬性设定的问卷逻辑性错答则该问卷作废,同时对该访问员的问卷进行全面审核,项目结束后还将进行二次卷审。
3、 调研访问系统提高访问质量和工作效率
问卷答题时采用的系统后台能够自动进行逻辑跳转,最大程度降低问卷错误率。同时所有执行问卷将直接上传网络后台,可实时在线查看问卷答题情况,并对项目执行进度及配额进行实时监控。所有答题数据直接从后台进行导出,无需人工进行录入,降低问卷数据二次错误。同时,武汉恒诺市场研究使用的调研问卷系统自带GPS定位、静默照相、全程录音等多样化辅助功能,为数据和信息采集的真实性提供了有效凭证。
这种颠覆传统纸质版问卷的调研执行方法,不仅操作方便、快捷、高效,而且极大程度上了保障了数据采集的稳定性和可靠性,先进的数据采集管理系统为项目提供高质量的执行问卷。
4、 数据处理方式科学严谨
在数据处理方面,不仅要求由经验丰富的高级数据分析师进行数据分析、挖掘,全程监控问卷数据填写误差;而且在完成数据初始报告当天,还会根据初始报告结果进行深层逻辑纠错;最后,在数据整合阶段,会再次检测数据完整、清理数据标签、处理缺失数据、做频次检查、寻找奇异值、处理可能的明显的逻辑错误等事宜。但恰巧这种看似繁冗复杂的多番检测流程,却极大程度的确保了数据的真实有效。
质控工作不是靠单一单点的管控就能够实现的,任何一个细节都有可能会对最终调研数据结果的有效性起到影响作用。因此,需要我们从调研的各个环节进行多角度全方位进行把控。