Home > Blogs > VMware vFabric Blog

5 Steps to Mainframe Modernization with a Big Fast Data Fabric

For growth initiatives, many companies are looking to innovate by ramping analytical, mobile, social, big data, and cloud initiatives. For example, GE is one growth-oriented company and just announced heavy investment in the Industrial Internet with GoPivotal. One area of concern to many well-established businesses is what to do with their mainframe powered applications. Mainframes are expensive to run, but the applications that run off of them are typically very important and the business can not afford to risk downtime or any degradation in service.  So, until now the idea of modernizing a mainframe application has often faced major roadblocks.

There are ways to preserve the mainframe and improve application performance, reliability and even usability.  As one of the world’s largest banks sees, big, fast data grids can provide an incremental approach to mainframe modernization and reduce risk, lower operational costs, increase data processing performance, and provide innovative analytics capabilities for the business—all based on the same types of cloud computing technologies that power internet powerhouses and financial trading markets.

The Fast Data component

One customer used used vFabric GemFire to save $75 million dollars on a mainframe modernization project, and it has been used for the past ten years as highly performant, horizontally scalable data transaction layers, or big data grid, for mission-critical applications. Both GemFire and it’s sister product, SQLFire, are known to achieve linear scale. Key use cases include credit-card transaction systems, stock trading platforms, foreign exchange systems, web-based travel reservation systems, and mainframe batch data offloading. As an in-memory data grid, its main advantages are being able to do in-memory, sub-millisecond transactions while still maintaining the highest standards for fault-tolerance, high-availability, and linear scalability on a distributed platform.

The Big Data component

For More Information:

vFabric GemFire
vFabric SQLFire

With big data analysis, Greenplum has a multitude of customer case studies with companies like O’Reilly Media, Skype, and NYSE Euronext. These solutions have become well-known when it comes to analytical analysis on multiple terabyte or petabyte data sets where traditional relational databases begin to break down, stop scaling, or fail to deal well with un-structured data. Greenplum technology provides a complete big data solution for both structured and unstructured data, based on the Greenplum Database and Pivotal HD—a commercially supported distribution of Hadoop that includes HDFS, MapReduce, Hive, Pig, HBase, Zookeeper, Sqoop, and Flume. The recently announced Pivotal Advanced Database Services powered by HAWQ allow for SQL queries to run on the fastest Hadoop-based query interface on the market today—a 100X+ faster solution.

Fast Data + Big Data: Better together

Big data and fast data solutions make a lot of sense together as we’ve seen on many customer solution blueprints delivered over the past several months. This is because most business owners and administrators aren’t able to fully utilize the data being captured in their transactional systems on a daily basis. From a business value perspective, the fast data layer can bring scalability and reliability to the business while reducing the cost per transaction. Most transactional systems also benefit from predictive analytics on transacted data, and the fast data layer enables this type of real-time transaction analysis that can also incorporate big data result-sets. The big data layer provides insight on mountains of data to help with decision making and support traditional performance metrics or enable more advanced types of visualization and data science.

From Mainframe to Big Fast Data Architecture

Moving from mainframe to big, fast data is an evolution. A phased approach—step by step—is certainly the most recommended way of modernizing applications. It makes sense because it minimizes risk and better justifies investments. After working with many customers who face this problem, here is one approach we recommend.

1. Selecting the Pilot: Pick a Starting Point

As with most major initiatives, an initial use case or small scope should be used as a pilot to validate the architecture choices and prove a return for the overall project. The ideal project candidate should a) have little or no integration points with other systems on the legacy platform, b) be small but critical to existing business processes, c) consume a considerable amount of operational expenses, and/or d) represent a business risk in its current state. By screening this way, we should be able to deliver something of value to the business,  reduce OpEx, and make the improvement quickly while avoiding bad decisions.

2. Designing the Modern Data Architecture for Co-Existence

The goal of this step is determine what legacy data stays, migrates, or integrates. First, there is an analysis on the pilot’s data model. Then, we begin to design a data architecture that makes sense for a highly scalable, distributed data grid and still supports the existing business model and processes. The analysis should identify which entities are transactional, a mix of transactional and analytical (e.g. part of a real-time analytics model), or purely analytical. During this process, we make decisions regarding data model partitioning, replication, colocation, disaster recovery, transaction consistency, and more. We also decide which data to leave on the legacy platform, accessing it on the fly as needed using the GemFire integration layer capabilities.

3. Integrating Mainframe and Big Data Grid

While the data architecture is being defined, we start building the initial big fast data infrastructure. Then, the pilot migrates the first use case to the modernized architecture. By using the GemFire/SQLFire asynchronous integration layer, we can provide data consistency between the new application and legacy mainframe application. Transactions done on the modernized system are delivered simultaneously to both the legacy system and the analytics platform. Integration with legacy can be achieved using either a mainframe connector, CICS Web Services, messaging platform, or any other integration protocol.

4. First Deployment Risk Mitigation Plans

When the pilot is complete and has proven to be better performing than the legacy system with much lower maintenance costs, we are ready to partially turn off our first piece of the legacy system. The legacy system, especially if living on a mainframe, should stay there for a period of time to support ongoing business. During this time, new transactions should start happening on the new system and data can be validated against the original system to make sure it is behaving exactly as expected. This will minimize risk, assure a seamless architecture evolution, and avoid headaches from unexpected problems. While the deployment acts as an advanced, operational cache for the mainframe, the mainframe still receives the data it needs while both analytical and real-time or predictive analytics data stores are updated.

5. Evolution

Step-by-step, other applications or portions of the mainframe can be carefully migrated to the new platform in a similar manner—without risk. As this happens, we gradually reduce mainframe usage, costs, and time to market for new deployments. We gain a level of scalability proven by data grids that run the most rigorous and high-performance data environments on the planet—those that power financial transactions. We also enable new methods of analysis to unleash business insight and value.

Of course, there is an initial capital expense to make; however, the investment is justified by reduced operational expenses. Companies can also save on capex by leveraging existing, partially used infrastructure since the software runs on commodity hardware.

About the Author: Frederico Melo (a.k.a. Fred Melo) has a degree in Computer Science and has been working with Software Engineering for the last 14 years. His areas of expertise include Grid Computing, Highly Scalable Architectures, Big Data, Fast Data and Legacy Modernization. He is currently based in Sao Paulo, Brazil working as Field Engineer for Pivotal.

60 thoughts on “5 Steps to Mainframe Modernization with a Big Fast Data Fabric

  1. Sanjay Bagal

    How can I transfer mainframe files to HDFS directly ?

  2. Balaje MS Visanaathan


  3. vincent johnson

    great post

  4. سرور مجازی ایران

    I am truly happy to read this webpage posts which includes plenty of helpful facts, thanks for providing such statistics.

  5. خرید وی پی ان

    Big Fast Data Fabric oked

  6. دانلود نرم افزار های روز دنیا


  7. آموزش برنامه نویسی

    برنامه نویسی اندروید

  8. خرید vpn


  9. وردپرس

    Hi Frederico Melo
    I,m very happy to read this webpage , nice this article

  10. apnapaise.in

    very good

  11. content4u.in


  12. empbank.in


  13. ekrishinaip.in

    nvmmbvnb krgjigiofdgjfgjiofoijffg

  14. تصفیه آب خانگی

    very good

  15. طراحی سایت در تبریز

    It was really great Mmnvnm.mtalbtvn

  16. خرید vpn


  17. قالب وردپرس

    It was beautiful Morsi

  18. فاميلی ژورنال

    It was good fun

  19. فروش لوازم موبایل

    Thanks man

  20. ahmad

    Thanks man

  21. ahmadreza

    very good

  22. خرید کاندوم

    خرید کاندوم

  23. تابلو ال ای دی

    تابلو ال ای دی

  24. کارت تخفیف دندانپزشکی


  25. دانلود آهنگ


  26. فارسی موزیک

    فارسی موزیک

  27. تور هوایی مشهد

    تور مشهد

  28. Mihanpix.com

    nice article

  29. قالب وردپرس

    Hi Frederico Melo
    I,m very happy to read this webpage ,nice this article

  30. rahim

    thanks for this article
    i like this post

  31. دانلود سریال game of thrones


  32. دانلود فیلم کیلو آلبالو

    with-a-big-fast post

  33. real psychics

    C’est un sujet proche de mon coeur… Merci!

    Où sont vos coordonnées? http://realpsychicnow.biz

  34. std testing near me

    Très rapidement ce site sera célèbre parmi tous les visiteurs du blog, en raison de ses bons messages http://stdclinicsnearme.info

  35. local std testing

    Enregistré comme un favori, j’aime vraiment votre site! http://stdtestingnearme.biz

  36. are psychics real

    Wow, superbe format de blog! Combien de temps ont
    vous avez déjà blogué? vous faites paraître le blog facile.
    Le look complet de votre site web est super, aussi bien que le contenu! http://realpsychicreadings.info

  37. cheap phone psychic readings

    Des biens magnifiques de votre part, mec. J’ai pris en compte tes trucs avant et tu es trop magnifique.
    En fait, j’aime ce que vous avez obtenu ici,
    certainement aimer ce que vous dites et la façon dont, au cours de laquelle vous
    dis-le. Vous le rendez divertissant et vous prenez toujours soin de rester sage.
    Je suis impatiente de lire plus de ta part. C’est en fait un super
    site. http://cheapphonepsychics.online

  38. std testing near me

    Hello, after reading this amazing article i am also cheerful to share my experience here with colleagues.

  39. تزریق-ژل تزریق-ژل تزریق-ژل تزریق-ژل تزریق-ژل

    I have experience in training different body types and fitness levels, so whatever your goals are I can help.

  40. چاپ عکس روی تخته شاسی

    very good and interesting page

  41. جهیزیه عروس

    یکی از مراکز معتبر خرید جهیزیه عروس در ایران و خرید لوازم آشپزخانه فروشگاه اینترنتی نوین جهاز هست که میتونید برای خرید جهیزیه ها به اونجا سر بزنید.
    ممنون از سایت خوبتون

  42. ترجمه متن فارسی به انگلیسی


  43. فیستول

    می توان گفت بهترین راه درمان فیستول لیزر می باشد. با بررسی مزایای لیزر نسبت به جراحی باز می توان به این مسئله پی برد. در عمل با لیزر از بی حسی موضعی استفاده می شود بنابراین احتیاجی به بیهوشی و بستری شدن بیمار در بیمارستان نمی باشد. خونریزی ناشی از عمل با لیزر در مقایسه با جراحی بسیار کمتر است. برخلاف جراحی که دوران نقاهت یک تا دو ماهه دارد، با این روش فرد به راحتی می تواند فعالیت های روزانه خود را از سر بگیرد. به وسیله عمل با لیزر فرد دچار درد شدید نمی شود و به نسبت عمل با جراحی درد کمتری احساس می کند.

  44. درمان شقاق

    لیزر در هر دو نوع شقاق قابل استفاده است. برای درمان شقاق حاد از لیزرهای با توان پایین استفاده می شود. هفته ای ۲ تا ۳ جلسه و در مجموع تا ۱۲ جلسه این کار می تواند ادامه داشته باشد. برای درمان شقاق پیشرفته یا مزمن از لیزرهای با توان بالا استفاده می شود. با این روش زخم شقاق و زایده پوستی آن برداشته می شود و عمل اسفنکتروتومی انجام می شود

  45. ویزای کانادا

    very good and so useful text

  46. Schniz

    you can count on us in best modern and classic design for your home.
    visit our products.

  47. مقاله

    دانشجویی و دانش اموزی

  48. rasmyar.com


  49. گروه تحقیقاتی و اموزشی کرامت


  50. عطاری شاه جهان طب سنتی و گیاهان دارویی

    , دارو گیاهی , دارو گیاهی برای پریود شدن , دارو گیاهی برای قطع شیر مادر , دارو گیاهی برای کبد چرب , دارو گیاهی برای سرماخوردگی , دارو گیاهی برای لاغری , دارو گیاهی برای فشار خون بالا , دارو گیاهی برای سرفه , دارو گیاهی برای معده درد , دارو گیاهی کولیت عصبی , دارو گیاهی اعصاب , دارو گیاهی اسهال , دارو گیاهی اشتها اور , دارو گیاهی افزایش قد , دارو گیاهی اسید معده , دارو گیاهی افتیمون , دارو گیاهی انرژی زا , دارو گیاهی ابهل , دارو گیاهی اسفرزه , دارو گیاهی افنان , دارو گیاهی آرامبخش , دارو گیاهی آویشن , دارو گیاهی آسم , دارو گیاهی آرتروز , دارو گیاهی آبریزش بینی , دارو گیاهی آفت دهان , دارو گیاهی آنخ , دارو گیاهی آلزایمر , دارو گیاهی آب مروارید , دارو گیاهی آرامش اعصاب , دارو گیاهی برای کیست تخمدان , دارو گیاهی برای عفونت رحم , دارو گیاهی پروستات , دارو گیاهی پنج انگشت , دارو گیاهی پولک , دارو گیاهی پنیرک , دارو گیاهی پا درد , دارو گیاهی پونه , دارو گیاهی پاکسازی کبد , دارو گیاهی پریودی , دارو گیاهی پولکی , دارو گیاهی پریود شدن , دارو گیاهی تب بر , دارو گیاهی تاخیری , دارو گیاهی ترک اعتیاد , دارو گیاهی تقویت تخمدان , دارو گیاهی تنبلی تخمدان , دارو گیاهی تقویت حافظه , دارو گیاهی تبخال , دارو گیاهی تنگی نفس , دارو گیاهی ترک سیگار , دارو گیاهی تقویت اسپرم , دارو گیاهی ثفا , دارو گیاهی ثعلب , دارو گیاهی سنا , دارو گیاهی ثامن , داروی گیاهی ثعلب , فهرست داروهای گیاهی ثبت شده , داروی گیاهی اخلاط ثلاثه , داروی گیاهی برای ثقل معده , خواص داروی گیاهی ثعلب , داروی گیاهی ثفا , دارو گیاهی جفت , دارو گیاهی جدوار , دارو گیاهی جامع , دارو گیاهی جهت پریود شدن , دارو گیاهی جهت پروستات , دارو گیاهی جوش صورت , دارو گیاهی جهت کبد چرب , دارو گیاهی جوپار , دارو گیاهی جلوگیری از سقط جنین , دارو گیاهی جهت چربی خون , دارو گیاهی چاق کننده , دارو گیاهی چربی خون , دارو گیاهی چربی سوز , دارو گیاهی چاقی , دارو گیاهی چاقی صورت , دارو گیاهی چشوم , دارو گیاهی چاقی رویال , دارو گیاهی چاق کننده صورت , دارو گیاهی چربی سوز قوی , دارو گیاهی چهل گیاه , دارو گیاهی حساسیت فصلی , دارو گیاهی حساسیت , دارو گیاهی حالت تهوع , دارو گیاهی حلبه , دارو گیاهی حماس , دارو گیاهی حب جدوار , دارو گیاهی حافظه , دارو گیاهی حرمل , دارو گیاهی حکمت طرقبه , دارو گیاهی حکیم تهرانی , دارو گیاهی خواب اور , دارو گیاهی خلط آور , دارو گیاهی خرنوب , دارو گیاهی خولنجان , دارو گیاهی خلط آور قوی , دارو گیاهی خرگوشک , دارو گیاهی خراطین , دارو گیاهی خار مریم , دارو گياهي خواب اور , دارو گیاهی خلط گلو , دارو گیاهی دندان درد , دارو گیاهی دیابت , دارو گیاهی دل درد , دارو گیاهی دیسک کمر , دارو گیاهی درد معده , دارو گیاهی دوسین , دارو گیاهی درمنه , دارو گیاهی دفع سنگ کلیه , دارو گیاهی درمان سینوزیت , دارو گیاهی در مشهد , دارو گیاهی ذات الریه , داروی گیاهی ذات الریه , داروی گیاهی ذیابیطس , داروی گیاهی ذمه , داروی گیاهی برای ذخیره تخمدان , داروی گیاهی برای ذات الریه , داروی گیاهی تقویت ذهن , داروی گیاهی کاکل ذرت , دارو گیاهی برای تقویت ذهن , دارو گیاهی برای تمرکز ذهن , دارو گیاهی روتارین , دارو گیاهی ریزش مو , دارو گیاهی ریه , دارو گیاهی رفع یبوست , دارو گیاهی رشد مو , دارو گیاهی رویال , دارو گیاهی رفلاکس معده , دارو گیاهی رفع کیست تخمدان , دارو گیاهی رفع سفیدی مو , دارو گیاهی رشد سریع مو , دارو گیاهی زنیان , دارو گیاهی زخم معده , دارو گیاهی زود انزالی , دارو گیاهی زانو درد , دارو گیاهی زوفا , دارو گیاهی زاج , دارو گیاهی زرک , دارو گیاهی زخم رحم , دارو گیاهی زاغ , دارو گیاهی زونا , دارو گیاهی ژل رویال , داروی گیاهی ژینکگو بیلوبا , داروی گیاهی ژن استروجی , داروی گیاهی برای ژنیکوماستی , داروی گیاهی ژیوار , داروی گیاهی ژن استروجی 100 , داروی گیاهی ژل رحم , داروی گیاهی ژینکو , داروی گیاهی ژل رویال , داروی گیاهی ژیاردیا , دارو گیاهی سرماخوردگی , دارو گیاهی سرفه , دارو گیاهی سنگ کلیه , دارو گیاهی سردرد , دارو گیاهی سینوزیت , دارو گیاهی سنگ شکن کلیه , دارو گیاهی سنگ صفرا , دارو گیاهی سوزش ادرار , دارو گیاهی سوزش معده , دارو گیاهی شفا , دارو گیاهی شیرین بیان , دارو گیاهی شپش , دارو گیاهی شوره سر , دارو گیاهی شیرافزا , دارو گیاهی شکم درد , دارو گیاهی شب ادراری , دارو گیاهی شکم کارکن , دارو گیاهی شقاق , دارو گیاهی شکم پاره , دارو گیاهی صبر زرد , دارو گیاهی صفرا بر , دارو گیاهی صبر , دارو گیاهی صفرا , دارو گیاهی صفوف , دارو گیاهی صاف کننده خون , دارو گیاهی صحنه , دارو گیاهی صورت , داروی گیاهی صفرا بر , داروی گیاهی صبر زرد , دارو گیاهی ضد سرفه , دارو گیاهی ضد خواب , دارو گیاهی ضد افسردگی , دارو گیاهی ضد استرس , دارو گیاهی ضد حساسیت , دارو گیاهی ضد نفخ , دارو گیاهی ضد بارداری , دارو گیاهی ضد سرفه خشک , دارو گیاهی ضد سرطان , دارو گیاهی ضد التهاب , دارو گیاهی طیرانی , دارو گیاهی طلای سبز , دارو گیاهی طبع گرم , دارو گیاهی طریفل , دارو گیاهی طرقبه مشهد , دارو گیاهی طارونه , دارو گیاهی تپش قلب , دارو گیاهی طبع سرد , دارو گیاهی طوبی , دارو گیاهی تباشیر , ظرف دارو گیاهی , دارو گیاهی عفونت ادراری , دارو گیاهی عفونت رحم , دارو گیاهی عفونت ریه , دارو گیاهی عفونت معده , دارو گیاهی عفونت , دارو گیاهی عفونت دندان , دارو گیاهی عفونت کلیه , دارو گیاهی عفونت روده , دارو گیاهی علی کردی , دارو گیاهی عفونت زنانه , دارو گیاهی غلظت خون , دارو گیاهی غضروف ساز , دارو گیاهی غازیاغی , دارو گیاهی غبیرا , دارو گیاهی کاسنی , دارو گیاهی غافث , دارو گیاهی غاریقون , دارو گیاهی قم , دارو گیاهی برای غده تیروئید , داروی گیاهی غضروف ساز , دارو گیاهی فشار خون , دارو گیاهی فلوس , دارو گیاهی فران , دارو گیاهی فوفل , دارو گیاهی فراسیون , دارو گیاهی فرشته , دارو گیاهی فشار بالا , دارو گیاهی فت فیس , دارو گیاهی فلوس برای نوزاد , دارو گیاهی فلوس چیست , دارو گیاهی قاعده آور , دارو گیاهی قند خون , دارو گیاهی قاعده آور سریع , دارو گیاهی قاعده آور قوی , دارو گیاهی قاعده اور فوری , دارو گیاهی قند , دارو گیاهی قلب , دارو گیاهی قوی برای لاغری , دارو گیاهی قلب درد , دارو گیاهی کبد چرب , دارو گیاهی کارزان کرمانشاه , دارو گیاهی کیست تخمدان , دارو گیاهی کم خونی , دارو گیاهی کمر درد , دارو گیاهی کاهش اشتها , دارو گیاهی کبد , دارو گیاهی کم کاری تیروئید , دارو گیاهی کلیه , دارو گیاهی گلو درد , دارو گیاهی گزنه , دارو گیاهی گانودرما , دارو گیاهی گرفتگی صدا , دارو گیاهی گل مریم , دارو گیاهی گل سرخ , دارو گیاهی گرم , دارو گیاهی گل بنفشه , دارو گیاهی گل زرد , دارو گیاهی گرمی , دارو گیاهی لاغری , دارو گیاهی لاغر کننده , دارو گیاهی لاک مغسول , دارو گیاهی لوف , دارو گیاهی لک صورت , دارو گیاهی لاریس , دارو گیاهی لخته خون , دارو گیاهی لاغری شکم , دارو گیاهی لوز , دارو گیاهی لاغری سریع , دارو گیاهی ماریانا , دارو گیاهی معده درد , دارو گیاهی معده , دارو گیاهی مومیایی , دارو گیاهی مریم گلی , دارو گیاهی میگرن , دارو گیاهی مازو , دارو گیاهی مشهد , دارو گیاهی ملین , دارو گیاهی میکروب معده , دارو گیاهی نصیری صحنه , دارو گیاهی نفخ شکم , دارو گیاهی نیوشا , دارو گیاهی نیکو صفت , دارو گیاهی ناخنک , دارو گیاهی نقرس , دارو گیاهی نشاط آور , دارو گیاهی نفخ , دارو گیاهی نفس تنگی , دارو گیاهی نیلوفل , دارو گیاهی ورم معده , دارو گیاهی واسه معده درد , دارو گیاهی واسه سردرد , دارو گیاهی واسه سرماخوردگی , دارو گیاهی واسه کبد چرب , دارو گیاهی واسه پریود شدن , دارو گیاهی واسه کمر درد , دارو گیاهی واسه اعصاب , دارو گیاهی واسه سرفه , دارو گیاهی واسه لاغری , دارو گیاهی هلسی , دارو گیاهی هاضوم , دارو گیاهی هیمالیا , دارو گیاهی هوم , دارو گیاهی هل باد , دارو گیاهی همدان , دارو گیاهی هفت تخمه , دارو گیاهی هلیله , دارو گیاهی هلیله سیاه , دارو گیاهی هلپه , دارو گیاهی یبوست , دارو گیاهی یبوست شدید , دارو گیاهی یرقان , دارو گیاهی یائسگی , دارو گیاهی یفت , دارو گیاهی یبوست نوزاد , دارو گیاهی یبوست کودکان , دارو گیاهی یونجه , دارو گیاهی یا شیمیایی , دارو گیاهی یارپوز ,

  51. متر به متر

    very good
    pleas cheking my vebsait


  52. mehrdad

    بازاریابی دیجیتالی مهرداد
    دانلود به روزترین فایلها

  53. mehrdad

    فروشگاه فایل مهرداد
    جدیدترین و به روزترین فایلهای دانلودی

  54. mehrdad

    سایت راه موفقیت
    راه موفقیت هر ایرانی جدیدترین مقالات و فایلهای صوتی و تصویری موفقیت و روانشناسی

  55. mehrdad

    فروشگاه فایل مهرداد
    فروش انواع فایلهای دانلودی و فیزیکی

  56. mehrdad

    زندگی زیبا
    زیباترین مطالب موفقیت و روانشناسی

  57. harrybilli

    good to see this information.

  58. trolling motor battery

    the concept is really chear to me.

  59. cartergreg

    big data is really helpful in business.

  60. 1060 Aluminum Sheet

    I have been using vmware recently and it is very easy to use.
    For more info, please visit https://www.alufoil.cn/


Leave a Reply

Your email address will not be published. Required fields are marked *