如何用数据分析小算盘

㈠ 大数据的价值是什么

大数据是什么？官方解答是巨量资料，指需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。大数据最早提出者，指不用随机分析法（抽样调查）的捷径，而是采用所有数据进行分析处理。拥有4V特点，即大量、高速、多样、价值。大数据应用广泛，与人工智能和云计算处境频率较高。在金融领域、营销领域、甚至医疗领域等各行各业中发挥着它的作用。当你拥有了大量数据后，这些结果会对每个行业发展方向解决问题有指向性作用，得数据者得人心，得人心者的天下。祝你今天有个好心情，我是u由二毛（微信：ermaodaxia）

㈡ 个人信息该如何 高效合理利用

从目前的市场现状来看，不管是几亿用户量的淘宝、微信、京东、58同城还是一个刚上线的小APP，似乎都在极其“渴望”地获取着用户任何一丁点儿的数据信息，这背后既有着“法不禁止即为许可”的因素，同时也有“APP们”各自的小算盘，毕竟数据本来就在哪里，你要还是不要？

我国相关的法律法规没有明确规定哪些个人数据是可以获取的，于是“APP们”照拿不误，照单全收，用户被拿了也无力吐槽，剩下的似乎就看“APP们”怎么将这些数据进行“造化”了。

虽然网络黑产疯狂，但是由于《网络安全法》已经实施，正规APP平台方主动去将用户数据用于不法勾当的可能性很小，反而用户需要警惕的是各种不正规渠道、只以窃取个人信息为目的而存在的APP，这种APP危害极大，也并非主流所为，必须彻底查杀。

而正规APP平台获取用户信息后，用作大数据分析也好，用作人工智能学习基础也好，甚至用作平台间数据交换也好，最关键的还是要对用户信息的保护和进行真正有价值的利用，让用户信息真正到头来能够服务好用户。

在当下这个瞬息万变的年代，一味地讲求信息的谨慎原则似乎有点不合时宜，信息的互联互通已经成为趋势，我们除了需要要求平台保护好我们的信息外，更加需要对平台在利用我们的信息时提出更高的要求：以各个互联网巨头割裂而成的互联网信息孤岛如何打通？个人信息既然作为一种资源被平台所利用，而提供这种资源的用户本身是否可以获得相应的回报？当用户信息不希望被平台所利用时，是否可以有权说不？

以互联网目前普遍存在的信息孤岛为例，腾讯系、阿里系、网络系等等，虽然体量庞大，但是数据却割裂固封，用户在淘宝买了东西，网络搜索并不会懂得给用户更好的选择，在转转上面想淘二手货，闲鱼上的好货也并不会主动推送，这对于用户而言，平台间的割裂更是造成了个人信息利用的低下，也许各大APP在合法的途径下积极获取用户信息的同时，需要思考的是如何更加高效地利用，而不是存着作为估值的筹码。叶丹

来源：南方日报

㈢ 抓包工具有哪些

抓包工具有哪些？
1.
Wireshark抓包工具 Wireshark(前称Ethereal)是一个网络封包分析软件...

2.
MiniSinffer MiniSniffer(网络嗅探器)一个小巧的网络抓包工具(嗅探器)...

3.
WSExplorer WSExplorer 是个简单实用的网络抓包工具,相比上个版本更人性化了,新版上在界面上进行了优化和添加了过滤功能。

4.
iptool iptool网路抓包工具是一款好用的网络抓包工具,使用方法很简单,...

了解过网络安全技术的人都知道一个名词“抓包”。那对于局外人，一定会问什么是抓包？考虑到，大家的技术水平不一，我尽可能用非专业的口吻简单的说一下。

抓包就是将网络传输发送与接收的数据包进行截获、重发、编辑、转存等操作，也用来检查网络安全。抓包也经常被用来进行数据截取等。黑客常常会用抓包软件获取你非加密的上网数据，然后通过分析，结合社会工程学进行攻击。所以，学会抓包，对于学好网络安全技术十分重要。

在我们做接口测试的时候，经常需要验证发送的消息是否正确，或者在出现问题的时候，查看手机客户端发送给server端的包内容是否正确，就需要用到抓包工具。而工程师和程序常用的抓包工具有哪些呢？今天我们就来简单聊一聊最常用的2种。

Fiddler是在windows上运行的程序，专门用来捕获HTTP，HTTPS的。

wireshark能获取HTTP，也能获取HTTPS，但是不能解密HTTPS，所以wireshark看不懂HTTPS中的内容。

总结，如果是处理HTTP,HTTPS 还是用Fiddler, 其他协议比如TCP,UDP 就用wireshark。

一、Fiddler

当启动fiddler，程序将会把自己作为一个代理，所以的http请求在达到目标服务器之前都会经过fiddler，同样的，所有的http响应都会在返回客户端之前流经fiddler。

Fiddler可以抓取支持http代理的任意程序的数据包，如果要抓取https会话，要先安装证书。

Fiddler的工作原理

Fiddler 是以代理web服务器的形式工作的,它使用代理地址:127.0.0.1, 端口:8888. 当Fiddler会自动设置代理， 退出的时候它会自动注销代理，这样就不会影响别的程序。不过如果Fiddler非正常退出，这时候因为Fiddler没有自动注销，会造成网页无法访问。解决的办法是重新启动下Fiddler.

Fiddler 如何捕获Firefox的会话

能支持HTTP代理的任意程序的数据包都能被Fiddler嗅探到，Fiddler的运行机制其实就是本机上监听8888端口的HTTP代理。Fiddler2启动的时候默认IE的代理设为了127.0.0.1:8888，而其他浏览器是需要手动设置的，所以将Firefox的代理改为127.0.0.1:8888就可以监听数据了。

Firefox 上通过如下步骤设置代理

点击: Tools -> Options, 在Options 对话框上点击Advanced tab - > network tab -> setting.

Firefox 中安装Fiddler插件

修改Firefox 中的代理比较麻烦， 不用fiddler的时候还要去掉代理。推荐你在firefox中使用fiddler hook 插件, 这样你非常方便的使用Fiddler获取firefox中的request 和response，当你安装fiddler后，就已经装好了Fiddler hook插件，你需要到firefox中去启用这个插件打开firefox tools->Add ons -> Extensions 启动 FiddlerHook

F