Témata
Source: Sanezoo

Machine vision in the service of manufacturing

The Brno-based company Sanezoo has made a name for itself among professionals in the field of automation and robotics over the six years of its operation. Still, most of us first heard about it only when it was awarded the gold medal at last year's International Engineering Fair for its intelligent visual quality control camera system. This award was received in Brno by the founders of the company – Lubos Brzobohaty, CEO, and Lubos Lorenc, Ph.D., CTO. At the turn of the year, the CEO visited us in the editorial office, and we had the opportunity to ask him a few questions.

Ivan Heisler

V redakci časopisu MM Průmyslové spektrum zastává pozici odborného redaktora. Vystudoval obor Stavební údržba a rekonstrukce tratí na Vysoké škole dopravy a spojů v Žilině. Po ukončení studia pracoval jako projektant ve Státním ústavu dopravního projektování, poté jako redaktor odborných publikací pro uživatele osobních počítačů a jako šéfredaktor časopisu Počítač pro každého. Do MM Průmyslového spektra nastoupil v roce 2021.

Reklama

Českou verzi tohoto článku najdete zde:

Strojové vidění ve službách výroby

Brněnská firma Sanezoo se za šest let svého působení zapsala do povědomí profesionálů v oboru automatizace a robotizace, většina z nás však o ní poprvé slyšela až v souvislosti s udělením zlaté medaile loňského mezinárodního strojírenského veletrhu za kamerový systém pro inteligentní vizuální kontrolu kvality. Toto ocenění v Brně přebírali zakladatelé firmy Ing. Luboš Brzobohatý, CEO společnosti, a Ing. Luboš Lorenc, Ph.D., CTO společnosti. Na přelomu roku nás pan ředitel navštívil v redakci a my jsme měli možnost položit mu několik otázek.

MM: How would you describe to our readers what your company does?

Lubos B.: My colleague and I founded Sanezoo more than six years ago to help people in manufacturing automate quality control. We started with camera systems. We thought it was a shame that people in manufacturing were doing tedious manual work, demanding a lot of attention and being prone to errors that negatively impacted manufacturing quality. People do make mistakes – they don't keep their attention, they think about something else, they can be indisposed and so on. Even with every effort, it is not in the human power to do such work with concentration and without error for several hours, not to speak of a whole work shift. Obviously, this is a task for robots. That's why we started developing a visual quality control system that helps manufacturing companies automate these activities. Right from the start, we found that a lot of tasks, such as visual inspection, measurement, and comparison, were already solved. However, the hard-to-scan (typically shiny) surface inspection had not been reliably solved yet. Industrial automation companies have resisted addressing these challenges because camera systems have problems with differently reflected light and also with various artifacts that the camera sees as deviations, even though these are visual differences, not functional defects. Different reflections or variations in the microstructure of the material surface, which the camera system evaluates as a change in shape or perhaps a defect when a specific combination of lighting and viewing angle is used, often cause false identification of the defect. It is not uncommon that inspection systems show so many false rejects that the manufacturer has to deploy additional people to validate the results of the system. Such a control system becomes useless. This is the challenge we have been focusing on and successfully solving, and not just with AI algorithms.

Founder and CEO of Sanezoo Lubos Brzobohaty is visiting the editorial office of MM Industrial Spectrum magazine. (Photo: I. Heisler)

MM: In what way is your visual quality control system better?

Lubos B.: Our added value is that our system can address these difficult-to-distinguish deviations and reliably identify defective pieces from good ones. We have designed unique lighting systems for different materials and for different types of products. Our industrial lights are composed of a large number of independently controlled sections. By sequentially activating them, the system mimics a person who, for example, rotates a shiny object in the light in various ways to find a viewing angle at which he or she can detect the defect. We take several images of the part with different lighting parameters in quick succession and analyze these images.

There are many similar cases in different areas of production – for example, parts made of shiny metal or plastic parts, painted parts or parts stored in blister packs. In such situations, conventional camera systems cannot handle the task. There are many applications on the market for which our solutions are suitable.

In short, we are solving problems that manufacturing companies have yet to be able to solve – both in the area of quality control and in the part picking for the production lines. Most other operations are being successfully automated, but quality control and part handling remain the domain of manual labor. Even modern companies with a high degree of automation must rely on employees for these two activities. As many as eighty percent of the people who work in modern manufacturing are engaged in these two tasks. And we can automate these activities.

MM: Who are your clients, and how do you manage to attract new customers?

Lubos B.: Our systems are typically used in the automotive industry, either directly by automotive companies or by their Tier-1 and Tier-2 suppliers. Our typical partner is an automation and robotics system integrator or a line builder – a company that builds entire lines.

The Unity system is used for automatic visual quality control. It uses machine vision technology with a camera and special lighting, analytical algorithms and neural network at the same time. (Source: Sanezoo)

We visit manufacturing companies and ask them what their pains are. And when we hear that something can't be automated, we pay attention and offer solutions. That's how we find opportunities and gaps in the market. At first, no one knew us very well, but because we already have very compelling references, we're gradually reaching other large customers, and we can quickly show them that our solution will work for them. Customers tend to be skeptical at first because they often have experience with systems that don't work that well, even if they are products from large suppliers. That's our opportunity: if we show customers that it can work and that we can do the job, then they want to work with us.

Hardware, software and artificial intelligence go hand in hand

MM: What do you actually deliver to your customers? What does your visual inspection system consist of? Is it a piece of equipment, or is it mainly software?

Lubos B.: Our advantage lies in that we are not just a hardware-only company, nor just a software-only company, nor just an AI-only company, but that we connect all three of these areas. This makes us different from other solutions available on the market. In terms of hardware, the foundations of our visual inspection system are the camera, the aforementioned special lighting and the computer. Of course, the software is also an integral part.

Reklama
Reklama
Reklama

The data for processing is generated by our cameras using our special lighting. Some pre-processing of the data may already occur in the camera, but the camera sends all the data to a device called a machine vision controller. This can be a server computer with a powerful graphics card (GPU). This machine runs a series of highly parallelized algorithms that process the camera data. These are both neural network inferences and analytical machine vision algorithms. It's all connected. We don't use conventional neural networks as they are known from other computer vision applications. These are our proprietary machine learning networks, which we call multi-channel because they process multiple channels at once.

MM: What do you mean by multiple channels exactly?

Lubos B.: While a conventional camera generates a single channel – a single image composed of black and white pixels at a given time, our system processes multiple images taken at different lighting conditions, surface texture, HDR (high dynamic range) images, glare-free images, and high-resolution images at the same time. All these data as individual channels enter simultaneously into both analytical algorithm processing and neural network processing. All of these components work together, which is why we call the whole system Unity.

One of Sanezoo's products is the Grasp system for automatic 3D picking of parts from a box and feeding them into a line or machine. (Source: Sanezoo)

MM: This is undoubtedly a vast amount of data that needs to be processed quickly. Where do the calculations physically take place? Where are the servers? Is it directly at the machines or at a computing center, or could it be in the cloud?

Lubos B.: In production, everything usually runs at the client's site, at their request, because they need continuous manufacturing data processing regardless of whether their internet connection or other infrastructure is working. Another common reason is the fear of cyber-attacks from outside or data loss or leakage. Large corporations usually have strict conditions regarding the possibility of external connectivity, and it is impossible to imagine transferring terabytes of data to a remote server and back, not to mention the extreme demands of such data traffic on the bandwidth capacity of local networks and Internet connections. We can place our machine vision controllers in their server rooms in case they have a fast local Ethernet network. Still, the client usually wants them right at the line or at the machine, just like a PLC or a robot controller. We can help the client remotely with setup, but their data is not sent anywhere.

Sanezoo was awarded the MSV 2023 Gold Medal for its Unity system for intelligent visual quality control in the category of Innovation in Automation Technology and Industry 4.0. (Source: Sanezoo)

MM: How does your system learn to detect defects?

Lubos B.: Conventional AI-based systems work by learning from defect-free components. You present them with a thousand good parts, and the AI learns them and reports a defect when it detects any anomaly. However, in manufacturing, too many factors change (tools wear out, materials change, etc.), and the inspection system must be reconfigured frequently to meet changing conditions. This costs time and money, and after several reconfigurations, users usually stop using such systems.

Our approach is different. We understand the general properties of various surfaces and their categories of common defects, and our system knows them in advance. Therefore, the manufacturer does not have to prepare sets of „OK“ and „Not Good“ components because no product is unknown to our system in terms of surface quality control. We simply need to know which areas on the surface of a given product to inspect and the severity of each type of defect that can be accepted at that location for the product to pass.

Reklama

Robotic parts handling

MM: So that was a visual quality control. However, in the introduction, you also mentioned the automation of parts picking. What solution do you offer for this task?

Lubos B.: Yes, I did. Although we started out with only camera systems and nothing to do with robots, we soon discovered that machine vision and robotic manipulation are related and are used together in production. It made sense to combine the two technologies. And yet, people involved in machine vision only know a little about robots, and vice versa. We're connecting the two worlds and putting them on the same platform. We developed a product called Grasp, a complete system for picking parts out of a box in 3D, called bin-picking, and putting them into a line or a machine. It can also perform automated visual quality control by our Unity product during part handling. Grasp uses passive stereovision – a pair of cameras mounted directly on the robot arm – and our lighting system, which makes the system suitable also for shiny surfaces.

MM: Do you develop and manufacture your products in the Czech Republic?

Lubos B.: Yes, the development is the work of our colleagues, of course, and we also manufacture everything we can in the Czech Republic. We manufacture our own lighting components and controllers directly and plan to manufacture our own cameras for the Grasp module. However, we do not have all the production in-house as we source many components. For example, we don't have our own machine shop, we don't make our own PCBs or do component placement ourselves. We source these components preferably from proven partners in the Czech Republic. Our company currently has more than thirty colleagues; if necessary, we hire additional external specialists for specific tasks.

The video demonstrates how the Sanezoo Grasp system automatically picks the components (here the shiny bolts) out of the box and feeds them precisely into the designated place. (Source: Sanezoo)
Související články
Strojové vidění ve službách výroby

Brněnská firma Sanezoo se za šest let svého působení zapsala do povědomí profesionálů v oboru automatizace a robotizace, většina z nás však o ní poprvé slyšela až v souvislosti s udělením zlaté medaile loňského mezinárodního strojírenského veletrhu za kamerový systém pro inteligentní vizuální kontrolu kvality. Toto ocenění v Brně přebírali zakladatelé firmy Ing. Luboš Brzobohatý, CEO společnosti, a Ing. Luboš Lorenc, Ph.D., CTO společnosti. Na přelomu roku nás pan ředitel navštívil v redakci a my jsme měli možnost položit mu několik otázek.

Od konstrukce strojů po parkovací věže

Mezi starší generací strojařů pravděpodobně není nikoho, kdo by neznal původem škodováka Josefa Bernarda z Jičína. Tento strojírenský nadšenec příští rok oslaví své sedmdesátiny. Před třiceti lety po odchodu z místního Agrostroje položil základy společnosti Vapos, která dává perspektivní práci patnácti desítkám lidí z Jičína a blízkého okolí.

Pod dvou letech opět na EMO do Hannoveru

Od 16. do 21. září 2019 se uskuteční 22. ročník největšího světového veletrhu zpracování kovů EMO. Megaakce se koná opět v Německu, které je po Číně a USA třetím největším trhem obráběcích strojů na světě. Veletrhu se účastní téměř 2 100 vystavovatelů ze 47 zemí světa. Z České republiky se očekává účast 28 firem na ploše necelých 1 700 m2. Na minulý veletrh v roce 2017 přijelo do Hannoveru z České republiky přes 2 200 odborníků.

Související články
Cena MM Award na EMO

Ocenění MM Award od našich německých kolegů z časopisu MM MaschinenMarkt je specialitou veletrhů pořádaných nejen v Evropě, ale po celém světě. Nejinak tomu bylo i na letošním hannoverském EMO, kde proběhlo slavnostní předání exponátům, které odbornou porotu zaujaly. Ceny jsou udělovány ve spolupráci se svazem VDW. Protože se jedná o jediné oficiální ceny udělované na veletrhu EMO a značky MM, VDW a EMO jsou dobře známé v oboru výrobní techniky, věnujeme jim svoji pozornost v retrospektivě veletrhu.

Reklama
Reklama
Reklama
Reklama
Související články
Zapalovací svíčky z jihu Čech dobývají celý svět

V letošním roce oslaví táborský Brisk osmdesát dva let své existence. Již od svého vzniku měla firma světové ambice. Na veletrhu Automechanika 2016 ve Frankfurtu je opět potvrdila. O zapalovací svíčky z jihočeského Tábora je velký zájem. „Aktuálně vyvážíme do více než 70 zemí a každý rok nám přibývají nová teritoria. Loni to byl například Mauricius, Zimbabwe a Malajsie. Nyní očekáváme první objednávky z Indonésie a Thajska,“ říká majitel společnosti Brisk Ing. Mojmír Čapka.

Made in Česko: Bezpečné bezdrátové spojení pro všechny

Prognózy, které se týkají internetu věcí (IoT) a průmyslového internetu věcí (IIoT), se mění stejně rychle jako možnosti této technologie samy. Už v roce 2008 bylo na světě víc připojených zařízení než lidí a odborníci ze Světového ekonomického fóra (WEF) tvrdí, že do roku 2025 bude 41,6 miliardy zařízení zachycovat data o tom, jak žijeme, pracujeme, pohybujeme se, jak fungují naše zařízení, stroje.

CIMT Peking, Část 1. Obecný pohled

V předvelikonočním týdnu se v Pekingu uskutečnil veletrh obráběcích strojů CIMT 2019. V asijském regionu se jedná o obdobu veletrhu EMO Hannover. A stejně jako EMO je velkou měrou národní výstava německé výrobní techniky, tak CIMT je převážně čínský. V tomto prvním vstupu se podíváme na letošní ročník trochu s odstupem, aniž bychom se zaměřili na konkrétní exponáty.

Nové technologie osvětlení vozidel

Získat zkušenosti s novými zdroji světla bylo cílem jednoletého projektu Ideag, do něhož se na konci roku 2017 pustila mladoboleslavská společnost EDAG Engineering CZ. Výsledný prototyp zadní lampy navržené pro model Škoda Superb ukazuje možnosti využití tří moderních technologií: elektroluminiscenční fólie, OLED panelu a COB LED destiček.

Praktický výzkum nám dělá svět lepším

Prof. Ing. Milan Gregor, PhD. se narodil v Prievidzi a dětství prožil v Necpaloch. Zde u příležitosti oslav 600. výročí první písemné zmínky byl v roce 2015 oceněn Cenou primátorky Prievidzy za mimořádné zásluhy v rozvoji hospodářství, vědy a techniky a šíření dobrého jména Slovenské republiky v zahraničí.

Stroj na středění klikových hřídelí

Je všeobecně známo, že kliková hřídel je jednou z nejkritičtějších součástek motoru s vnitřním spalováním a jedním z nejsložitějších a nejkomplexnějších dílů z hlediska obrábění. Potřeba přesného vyvážení klikové hřídele, která je rozhodujícím faktorem pro celkovou účinnost motoru, se stala ještě důležitější, jelikož výrobci automobilů usilují o snižování emisí CO2 prostřednictvím lepšího výkonu motoru a strategií spočívajících v odlehčování. Díky různým vylepšením, kterých se v průběhu let dosáhlo v procesech kování a odlévání, už mají neopracované komponenty klikové hřídele téměř požadovaný tvar s mnohem menším množstvím přebývajícího materiálu. To znamená, že na konečné klikové hřídeli je třeba obrábět méně částí. Přináší to s sebou také zvýšenou potřebu přesného vyvážení se zmenšenou velikostí protizávaží, které se při vytváření těžiště často provádí.

Veletržní válka světů

Redakce MM Průmyslového spektra věnovala šanghajskému veletrhu obráběcích strojů CCMT 2018 nemalou pozornost ve zpravodajství, které bylo uveřejňováno na webových stránkách v rubrice Očima redakce. V tomto článku a na přiložených obrázcích jsou zaznamenány veletržní postřehy, čínský kolorit, veletržní statistiky i holá fakta z oblasti čínského průmyslu. Něco málo o čínské výrobní technice a technologiích, které byly prezentovány na CCMT 2018, i pár dalších postřehů, jsme připravili do tohoto vydání.

Perspektivy čínského draka

Již několik let vám pravidelně v tomto čase přinášíme reportáže ze dvou klíčových strojírenských veletrhů celého asijského kontinentu, které jsou určitým barometrem srovnání postupného vývoje čínských výrobců obráběcích strojů a komponent, ale i pohledem na zvolené marketingové strategie nadnárodních společností při jejich penetraci na zdejší čínský trh – největší a nejprogresivněji rostoucí na světě. V lichých letech se v Pekingu v dubnu koná veletrh CIMT (China International Machine Tool Show), v sudých přibližně ve shodné době pak v Šanghaji veletrh CCMT (China CNC Machine Tool Fair). Aktuální postřehy z každého dne veletrhu jsme přinášeli prostřednictvím redakčního portálu mmspekturm.com a sociální sítě facebook, s tradičním komplexnějším pohledem na veletrh a čínský komoditní trh jako takový přicházíme nyní.

Strojírenské fórum 2018: Zaměřeno na nové technologie a materiály

Příběh pátého ročníku Strojírenského fóra se začal psát 10. května 2018 na půdě Fakulty strojního inženýrství VUT v Brně konferencí na téma moderní výrobní technologie a materiály s důrazem na aditivní výrobu z velké části kovových materiálů a na inovativní aplikace kompozitních materiálů. Na sto účastníků z řad výrobní a akademické sféry vyslechlo na 13 přednášek a následně v pozdních odpoledních hodinách se větší část z nich odebrala na exkurzi po šesti VaV pracovišťích zaměřených na nové technologie. Plný den poznání a nových setkání. Pojďme se k němu vrátit fotoreportáží.

Nanovlákenná membrána v oknech ochrání stroje i pracovníky

Zatímco o smogu v ulicích se vedou časté debaty, znečištěný vzduch v interiéru patří k opomíjeným tématům. A to i přesto, že podle Světové zdravotnické organizace stojí život 4,3 milionu lidí ročně a v průmyslových objektech ohrožuje jak zdraví pracovníků, tak samotný provoz. Díky rozvoji moderních technologií nyní interiér účinně ochrání nanovlákenná okenní membrána.

Reklama
Předplatné MM

Dostáváte vydání MM Průmyslového spektra občasně zdarma na základě vaší registrace? Nejste ještě členem naší velké strojařské rodiny? Změňte to a staňte se naším stálým čtenářem. 

Proč jsme nejlepší?

  • Autoři článků jsou špičkoví praktici a akademici 
  • Vysoký podíl redakčního obsahu
  • Úzká provázanost printového a on-line obsahu ve špičkové platformě

a mnoho dalších benefitů.

... již 25 let zkušeností s odbornou novinařinou

      Předplatit