离线数据库软件有哪些，类似hadoop大数据平台有哪些

本文目录一览

1，类似hadoop大数据平台有哪些
2，ADONET两个主要组件是Dataset数据集独立于数据源的访问
3，话题讨论Storm Spark Hadoop三个大数据处理工具的区别和联系是
4，flash copy是什么软件
5，lonmaker 31是什么软件

1，类似hadoop大数据平台有哪些

Storm, Spark, Hadoop比较http://www.itpub.net/thread-1882941-1-1.html

这个就比较负责了，可以用hadoop+hbase+spark/storm进行平台构建，spark用于数据分析和处理、hbase用于将处理后的数据保存、hadoop用于离线分析和原始数据存储，具体的还得结合应用场景

类似hadoop大数据平台有哪些

2，ADONET两个主要组件是Dataset数据集独立于数据源的访问

只读数据访问用SqlDataReader，不要使用DataSet 　　SqlDataReader 类提供了一种读取从 SQL Server 数据库检索的只进数据流的方法。如果当创建 ASP.NET 应用程序时出现允许您使用它的情况，则 SqlDataReader 类提供比 DataSet 类更高的性能。情况之所以这样，是因为 SqlDataReader 使用 SQL Server 的本机网络数据传输格式从数据库连接直接读取数据。另外，SqlDataReader 类实现 IEnumerable 接口，该接口也允许您将数据绑定到服务器控件。DataSet作为一个功能强大的、支持离线的数据库，其对性能的开销也相对较大。 Sqldataread优点：读取数据非常快。如果对返回的数据不需做大量处理的情况下，建议使用SqlDataReader，其性能要比datset好很多。缺点：直到数据读完才可close掉于数据库的连接。 Dataset是把数据读出，缓存在内存中。缺点：对内存的占用较高。如果对返回的数据需做大量的处理用Dataset比较好些可以减少对数据库的连接操作。优点：只需连接一次就可close于数据库的连接。一般情况下,读取大量数据,对返回数据不做大量处理用SqlDataReader.对返回数据大量处理用datset比较合适.对SqlDataReader和 Dataset的选择取决于程序功能的实现。

ADONET两个主要组件是Dataset数据集独立于数据源的访问

3，话题讨论Storm Spark Hadoop三个大数据处理工具的区别和联系是

bg4.png 1、大数据核心是什么？我觉得大数据的核心，首先是有其价值，如果数据量很大，而没有价值，那么大数据也就没什么特别了，所以大数据的最重要的就是我们能从大量数据中分析、挖掘出对组织有益的信息，当然了，到底有没有用，还得经过实际验证。另外，就是速度得快，市场机会稍纵即逝，所以如果分析那么多数据，需要一个星期，或者一个月，那么可能意义也不大了。 2、Storm, Spark, Hadoop三个大数据处理工具谁将成为主流？其实这些只是表面不同的工具而已，本质上的思想是一致，我相信未来还会有更多的工具涌现出来，但思想确很难有所变化，比如，你要想快，那么从计算机的体系结构来看，就得多内存，而少硬盘，因为硬盘太慢了。另外，从处理问题的角度也是一样的，通过采用更多的资源，以分布式的方式，来同时处理那么的数据，速度也肯定会快，当然前提是，不同机器之间交互通信的成本，低于由此带来的益处。 3、你觉得今年大数据的发展趋势如何？更快、更高、更强。不过也需要更加规范，这些个东西，A工具、B工具、C工具，我感觉有点像一个玩具，还不是一个成熟的产品，所以以后，可能会专门的公司来做商业化的软件，更加成熟的软件

1.jpg 1、大数据核心是什么？有三个方面：一是数据，没有数据扯啥都是白搭，二是技术，没有大数据的处理技术，那么数据也就只是一些磁盘，三是思想，有了数据和处理技术，还要有idea，也就是怎么让数据产生更大的价值？2、Storm, Spark, Hadoop三个大数据处理工具谁将成为主流？storm是实时处理，spark和hadoop是批处理，两者是互补。而spark和hadoop比较的话，spark主要是充分利用内存计算并且支持更多的操作而不仅是map/reduce，这样有些迭代密集的算法执行效率会更高。而hadoop可能需要多个mr任务来完成。在2.0之后，hadoop使用了新的yarn框架，map/reduce只是其中一种默许了，spark也可以在hadoop的yarn框架下运行的，所以2者还会是融合的。3、你觉得今年大数据的发展趋势如何？经过几年的酝酿应该会有更多的应用出现，除了互联网，在某些行业用户中也会有落地的成果。

话题讨论Storm Spark Hadoop三个大数据处理工具的区别和联系是

4，flash copy是什么软件

一. FlashCopy简介FlashCopy是FAStT上一项高级功能，它的作用是即时产生一份在这个时间点上的数据卷拷贝（Point-in-Time Copy）。这份拷贝的内容和原始数据卷是完全一样的，就像照片一样，于是又被称作“快照”。IBM FAStT存储服务器：FAStT 900，700，600Turbo，600，500，200可以支持这个功能。FlashCopy 功能中定义的专用名词：Base Volume －原始数据卷Repository Volume －保存对原始数据卷的改变的内容，通常容量会小于原始数据卷，服务器不能直接使用这个卷FlashCopy Volume －与原始数据卷同样大小的镜像卷，它可以给服务器使用，看起来和原始数据卷一样，是虚拟的卷，可读可写。Host －使用原始数据卷或FlashCopy卷的服务器FAStT上FlashCopy的工作原理：对图1的LUN1做一个FlashCopy LUN2,之后如果LUN1发生改变；例如：从“ABC”改为“DBC”，Rrpository卷全按“A”保存下来，再修改Snapshot卷的指南集。FlashCopy 功能的使用可以将由 DB2 数据库备份引起的数据库离线时间缩到最短。传统上，数据库管理员做在线的数据库备份时性能会受到影响，数据也不是一个时间点上的。再如果，需要备份的表空间很大，备份的时间很长，数据库应用又需要很高的性能，在这种情况下传统的备份方式就不是一个好的选择。我们采用的方式是先停掉数据库的I/O ，用很短的时间对表空间做一个快照，继续数据 I/O 操作，再对 FlashCopy 卷进行备份，数据库将会受到较小的影响。本文仅使用了 IBM FAStT 的 FlashCopy 功能。FAStT 的 FlashCopy 功能采用的是Copy-on-write 的策略，也就是说 FlashCopy 卷不是数据的物理拷贝。将镜像分离后，在备份 DB2 服务器上连接的数据库与生产机 DB2 数据库是一个物理实体，所以生产机的性能会受一定的影响。另一个方法是使用 IBM FAStT 的 VolumeCopy 功能。它是数据的真实拷贝，可以替代本实验中的 FlashCopy 功能使用。它的优点是将镜像分离后，备份机DB2数据库与生产机 DB2 数据库是独立的两个物理实体，所以生产机的性能不会受到一点的影响。缺点是完成 VolumeCopy 需要的时间比 FlashCopy 长。以下是 VolumeCopy 的介绍。VolumeCopy简介卷拷贝是指在一个FAStT磁盘子系统上，数据从源卷到目标卷的完全复制，是数据的物理拷贝。SM8.4的卷拷贝功能是与Flashcopy相结合使用的。它利用了Flashcopy能够生成一份数据瞬间完整影像的功能，保证了在数据复制过程中源卷的可用性和目标卷数据的一致性。如下图所示：在以下环境中卷拷贝会有很大的帮助：·为提高性能将数据移到更多，更块，更大的硬盘组成的阵列上。·使用应用数据做数据挖掘，分析，测试且不能影响应用性能的。·不能容忍用磁带备份数据的时间花费，不能容忍由磁带备份导致的应用性能降低。·数据访问量大，希望通过让一部分请求访问拷贝卷而提高读性能。IBM ESS FlashCopy简介FlashCopy是IBM ESS存储服务器所支持的功能之一，主要用于本地的备份和恢复。FlashCopy在某一时间点(T0)建立源LUN和目标LUN之间的对应关系，随后源LUN数据块(512字节)的更新会将源LUN数据块更新前的原始数据拷贝到目标LUN中。FlashCopy可以保存系统在T0时间的数据映像，如果在T0时间系统中的数据是完整和一致的，那么在目标LUN中的数据就可以用于系统的备份和恢复。

5，lonmaker 31是什么软件

LonMaker集成工具 (版本3.1)型号：37000和37020 LonMaker集成工具（版本3.1）是一个软件包，它可以用于设计、安装、操作和维护多厂商的、开放的、可互操作的LonWorks网络。它以Echelon公司的LNS网络操作系统为基础，把强大的客户-服务器体系结构和很容易使用的Microsoft Visio?用户接口综合起来。这使得LonMaker成为一个完善的，并足以用于设计和启动一个分布式的控制网络的工具。同时，它又相当经济，足以作为一个操作和维护工具。新特性为LonWorks网络提供图形设计、启动、操作和维护；包括对i.LON的支持，很容易的和Internet以及其它IP网络集成；从现有网络恢复设计图从而节约维护成本；支持多用户操作，并能将多个独立的网络合并成一个单一的网络，以加速大型网络的安装；作为单一工具解决方法还提供用户操作界面组件；现在向集成商和维护人员提供两种版本的LonMaker集成工具，而且为在购买LonMaker之前进行前期使用评估提供一种很容易的方法； LonMaker工具为LonMark节点，i.LON Internet服务器和其它LONWORKS节点提供全面的支持。这个工具充分利用了LonMark特点的优越性，例如标准功能属性、配置属性、资源文档、网络变量别名、动态网络变量和可修改的类型等。LonMark功能模式在LonMaker图形中以图形功能块的形式显示，可以很方便的目视和编制控制系统的逻辑文档。它还向用户提供用于设计控制系统的、大家较为熟悉的、类似于CAD的环境。Visio灵巧的图形绘图功能为创建节点提供了直接的、简单的方法。LonMaker工具包括许多LonWorks网络用的灵巧的图形，并且用户可以创建新的自定义图形。自定义图形可以像单个节点、功能块和连接线一样简单，也可以像带有嵌套子系统和预定义节点、功能块以及它们之间的连接的完整的系统一样复杂。当设计一个复杂的系统时，使用自定义子系统图形是节省时间的特性，只要通过简单的从模板（Stencil）中拖动一个自定义子系统图形到绘图区，额外的子系统就能被创建。由于安装人员能够在同一时间启动多个节点，这使得网络安装时间降到最少。节点能够通过使用服务管脚、扫描条形码、闪烁、手动输入或者自动恢复的方式被识别。网络恢复功能可以很容易的移植使用其它工具安装的网络或者数据库不能再使用的网络。网络合并功能允许大的系统一开始分成多个独立的系统被安装，最后合并成一个单一的、完整的系统。用于浏览网络变量和配置属性的一个集成的应用程序简化了节点的测试和配置。它的一个管理窗口可以提供测试、使能/禁止或者强制节点内部个别的功能块，以及对节点进行测试、闪烁和设置在线/离线状态。使用一个集成的LNS Text Box，LonMaker工具能够用来为LonWorks网络创建简单的操作接口。这个LNS Text Box是一个ActiveX控件，它能够增加到任何LonMaker绘图页中。LNS Text Box能够链接到网络中的任何网络变量、配置属性或者被强制的LonMark对象，并可用于监视或者设置被选择点。Visio的嵌入式脚本语言VBA能够将LNS Text Box链接到例如National Instruments ComponentWorks?等第三方ActiveX控件，从而能够在LonMaker绘图区中建立图形操作接口。通过LNS Text Box的使用，LonMaker工具能够作为许多网络的单一工具的解决方案。对于一些复杂的监视和控制应用程序，LonMaker工具可以和用作I/O驱动的LNS DDE Server相结合，适用于各第三方产品的操作接口软件包，例如：Wonderware InTouch?，Intellution FIX?，USDATA Factory View?和National Instruments LabView?和Bridge View?等。LonMaker工具同样可以用来在运行有LonMaker的计算机上创建网络变量，然后和网络中真正的成千上万的网络变量进行捆绑。LonMaker工具可以输入或者输出AutoCAD?文件，并生成一个竣工文档。一个综合的报告生成器和材料清单生成器同样能够被用于详细的网络配置报告。LonMaker 3.1 Server Pack 3现在可以下载。安装Service Pack 3能使你的LonMaker 3.1工具获得最佳的可靠性、兼容性和更高的性能。

LonMaker集成工具（版本3.1）是一个软件包，它可以用于设计、安装、操作和维护多厂商的、开放的、可互操作的LonWorks网络。它以Echelon公司的LNS网络操作系统为基础，把强大的客户-服务器体系结构和很容易使用的Microsoft Visio?用户接口综合起来。这使得LonMaker成为一个完善的，并足以用于设计和启动一个再看看别人怎么说的。再看看别人怎么说的。