JP7180245B2 - Processing machine data processing device and processing machine data management system - Google Patents

Processing machine data processing device and processing machine data management system Download PDF

Info

Publication number
JP7180245B2
JP7180245B2 JP2018181795A JP2018181795A JP7180245B2 JP 7180245 B2 JP7180245 B2 JP 7180245B2 JP 2018181795 A JP2018181795 A JP 2018181795A JP 2018181795 A JP2018181795 A JP 2018181795A JP 7180245 B2 JP7180245 B2 JP 7180245B2
Authority
JP
Japan
Prior art keywords
data
processing
character
character data
processing machine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018181795A
Other languages
Japanese (ja)
Other versions
JP2020052754A (en
Inventor
清和 松岡
遠鴻 田久保
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nidec America Corp
Original Assignee
Nidec America Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nidec America Corp filed Critical Nidec America Corp
Priority to JP2018181795A priority Critical patent/JP7180245B2/en
Priority to CN201910841168.8A priority patent/CN110956175A/en
Publication of JP2020052754A publication Critical patent/JP2020052754A/en
Application granted granted Critical
Publication of JP7180245B2 publication Critical patent/JP7180245B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/148—Segmentation of character regions
    • G06V30/153—Segmentation of character regions using recognition of characters or words
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/146—Aligning or centring of the image pick-up or image-field
    • G06V30/1475—Inclination or skew detection or correction of characters or of image to be recognised
    • G06V30/1478—Inclination or skew detection or correction of characters or of image to be recognised of characters or characters lines

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Factory Administration (AREA)
  • Character Discrimination (AREA)

Description

本発明は、加工機械用データ処理装置及び加工機械用データ管理システムに関する。 The present invention relates to a processing machine data processing device and a processing machine data management system.

プレス機及び樹脂成形機等の加工機械が知られている。加工機械では、生産量が絶えず変化するため、生産する製品毎に加工機械に取付ける金型または工具を取り換える必要があるとともに、成形圧力等の加工条件を調整する必要がある。このため、その準備及び調整を容易に行えるかが生産性の向上に大きく影響する。 Processing machines such as presses and resin molding machines are known. Since the production volume of processing machines constantly changes, it is necessary to replace the molds or tools attached to the processing machines for each product to be produced, and to adjust processing conditions such as molding pressure. Therefore, ease of preparation and adjustment greatly affects productivity.

そこで、例えば、特許文献１には、加工機械の加工回数、加工速度、生産品名、生産担当者、金型等の加工情報を、接続された通信網により入力して前記情報を収集、変換するデータ収集・変換器と、該データ収集・変換器から転送されたデータを記憶・演算処理するメインサーバーとを備えた生産性向上支援システムが開示されている。この生産性向上支援システムにより、生産の計画及び準備を前もって行うことができるため、加工機械の生産性を向上させることができる。 Therefore, for example, in Patent Document 1, processing information such as the number of processing times of a processing machine, processing speed, product name, production person in charge, mold, etc. is input through a connected communication network, and the information is collected and converted. A productivity improvement support system is disclosed that includes a data collector/converter and a main server that stores and processes data transferred from the data collector/converter. With this productivity improvement support system, it is possible to plan and prepare for production in advance, so that the productivity of the processing machine can be improved.

特開２００３－１９１２３５号公報Japanese Patent Application Laid-Open No. 2003-191235

特許文献１に開示のシステムでは、加工機械の加工情報は通信網を介して収集される。したがって、加工情報を出力する機能を有しない加工機械及び通信網に接続できない加工機械等からは前記情報を収集することはできない。 In the system disclosed in Patent Literature 1, processing information of processing machines is collected via a communication network. Therefore, the information cannot be collected from a processing machine that does not have a function of outputting processing information or from a processing machine that cannot be connected to a communication network.

しかしながら、加工機械の生産性向上の観点から、加工機械が加工情報を外部に出力する出力端子を有していない場合、または、加工機械が通信網に接続できない場合でも、加工機械から加工情報を収集したいという要求がある。 However, from the viewpoint of improving the productivity of processing machines, even if the processing machine does not have an output terminal for outputting processing information to the outside, or if the processing machine cannot be connected to a communication network, processing information can be transmitted from the processing machine. I have a request to collect.

本発明の目的は、加工情報を外部に出力できない加工機械から加工情報に関するデータを取得可能な加工機械用データ処理装置及び加工機械用データ管理システムを提供することである。 SUMMARY OF THE INVENTION An object of the present invention is to provide a processing machine data processing device and a processing machine data management system capable of acquiring data relating to processing information from a processing machine that cannot output processing information to the outside.

本発明の一実施形態に係る加工機械用データ処理装置は、加工機械の表示部に表示される加工情報に関する画像を撮像して画像データを取得する撮像部と、前記画像データから文字データを取得する文字データ取得部と、前記文字データを出力する文字データ出力部と、を備える。 A processing machine data processing apparatus according to an embodiment of the present invention includes an imaging unit that captures an image related to processing information displayed on a display unit of a processing machine to acquire image data, and character data that acquires character data from the image data. and a character data output unit for outputting the character data.

本発明の一実施形態に係る加工機械用データ管理システムは、加工機械と、前記加工機械用データ処理装置と、制御装置と、を備える。前記制御装置は、前記加工機械用データ処理装置から出力された文字データを取得して、前記文字データから加工機械で利用するデータを生成する。前記加工機械に前記データが入力される。 A processing machine data management system according to an embodiment of the present invention includes a processing machine, the processing machine data processing device, and a control device. The control device acquires the character data output from the processing machine data processing device and generates data to be used by the processing machine from the character data. The data is input to the processing machine.

本発明の一実施形態に係る加工機械用データ処理装置及び加工機械用データ管理システムによれば、加工情報を外部に出力できない加工機械から加工情報に関するデータを取得することができる。 According to a processing machine data processing device and a processing machine data management system according to an embodiment of the present invention, it is possible to acquire data related to processing information from a processing machine that cannot output processing information to the outside.

図１は、実施形態に係る加工機械用データ管理システムの概略構成を示す図である。FIG. 1 is a diagram showing a schematic configuration of a processing machine data management system according to an embodiment. 図２は、加工機械の表示部に表示される加工情報の例を示す図である。FIG. 2 is a diagram showing an example of processing information displayed on the display section of the processing machine. 図３は、データ領域情報の例を示す図である。FIG. 3 is a diagram showing an example of data area information. 図４は、文字変換情報の例を示す図である。FIG. 4 is a diagram showing an example of character conversion information. 図５は、加工機械用データ処理装置の動作を示すフローチャートである。FIG. 5 is a flow chart showing the operation of the processing machine data processing device. 図６は、画像データから文字データへの変換を模式的に示す図である。FIG. 6 is a diagram schematically showing conversion from image data to character data. 図７は、制御装置の動作を示すフローチャートである。FIG. 7 is a flow chart showing the operation of the control device.

以下、図面を参照し、本発明の実施の形態を詳しく説明する。なお、図中の同一または相当部分については同一の符号を付してその説明は繰り返さない。また、各図中の構成部材の寸法は、実際の構成部材の寸法及び各構成部材の寸法比率等を忠実に表したものではない。 BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. The same or corresponding parts in the drawings are denoted by the same reference numerals, and the description thereof will not be repeated. Also, the dimensions of the constituent members in each drawing do not faithfully represent the actual dimensions of the constituent members, the dimensional ratios of the respective constituent members, and the like.

（全体構成）
図１は、本発明の実施の形態に係る加工機械用データ管理システム１の概略構成を示す図である。加工機械用データ管理システム１は、加工機械１０Ａの加工情報に関するデータを収集して、加工機械１０Ａの加工情報を管理するシステムである。すなわち、加工機械用データ管理システム１は、加工機械１０Ａで製品を加工する際の加工条件等を含む加工情報をデータとして取得するとともに、他の加工機械１０Ｂで前記製品を加工する際に、加工機械１０Ａから取得した加工情報を利用可能なシステムである。 (overall structure)
FIG. 1 is a diagram showing a schematic configuration of a processing machine data management system 1 according to an embodiment of the present invention. The processing machine data management system 1 is a system that collects data relating to the processing information of the processing machine 10A and manages the processing information of the processing machine 10A. That is, the processing machine data management system 1 acquires processing information including processing conditions and the like when processing a product by the processing machine 10A as data, and when processing the product by another processing machine 10B, the processing information is processed. It is a system that can use machining information acquired from the machine 10A.

詳しくは、加工機械用データ管理システム１は、加工機械１０Ａ、１０Ｂと、加工機械用データ処理装置２０と、制御装置９０とを備える。 Specifically, the processing machine data management system 1 includes processing machines 10</b>A and 10</b>B, a processing machine data processing device 20 , and a control device 90 .

加工機械１０Ａ、１０Ｂは、それぞれ、加工情報が表示される表示部１１Ａ、１１Ｂを備える。加工機械１０Ａは、例えば、樹脂成形機であり、表示部１１Ａには、成形中の製品についての加工情報が表示される。なお、加工機械１０Ａ、１０Ｂは、特定の加工機械でなくてもよい。また、加工機械１０Ａと加工機械１０Ｂとは、異なる種類のものであってもよいし、加工機械１０Ａ、１０Ｂのそれぞれの表示部１１Ａ、１１Ｂにおいて加工情報の表示形式が異なってもよい。図２に、加工機械１０Ａの表示部１１Ａに表示される加工情報の一例を示す。 The processing machines 10A and 10B respectively include display units 11A and 11B on which processing information is displayed. The processing machine 10A is, for example, a resin molding machine, and processing information about the product being molded is displayed on the display section 11A. Note that the processing machines 10A and 10B do not have to be specific processing machines. Moreover, the processing machines 10A and 10B may be of different types, and the display formats of the processing information may be different in the respective display sections 11A and 11B of the processing machines 10A and 10B. FIG. 2 shows an example of processing information displayed on the display unit 11A of the processing machine 10A.

（加工機械用データ処理装置）
図１を参照して、加工機械用データ処理装置２０について説明する。加工機械用データ処理装置２０は、加工機械１０Ａの表示部１１Ａを撮像することによって表示部１１Ａに表示された画像のデータである画像データを取得し、取得した画像データから文字データを生成して出力する。詳しくは、加工機械用データ処理装置２０は、撮像部３０と、文字データ取得部４０と、文字データ出力部７０と、記憶部８０とを備える。 (data processor for processing machines)
A processing machine data processing device 20 will be described with reference to FIG. The processing machine data processing device 20 acquires image data, which is the data of the image displayed on the display unit 11A of the processing machine 10A by capturing an image of the display unit 11A, and generates character data from the acquired image data. Output. Specifically, the processing machine data processing device 20 includes an imaging section 30 , a character data acquisition section 40 , a character data output section 70 and a storage section 80 .

撮像部３０は、加工機械１０Ａにおける加工情報が表示される表示部１１Ａを撮像することによって表示部１１Ａに表示された画像のデータである画像データＰを取得する。本実施形態においては、加工機械１０Ａの表示部１１Ａには、加工機械ＩＤ、製品情報及び加工条件等の加工情報が文字で表示される。したがって、撮像部３０が取得した画像データＰには、加工機械ＩＤ、製品情報及び加工条件等の加工情報を表示する文字が画像形式で含まれる。 The imaging unit 30 acquires image data P, which is data of an image displayed on the display unit 11A by capturing an image of the display unit 11A that displays processing information in the processing machine 10A. In this embodiment, processing information such as a processing machine ID, product information, and processing conditions is displayed in characters on the display unit 11A of the processing machine 10A. Therefore, the image data P acquired by the image pickup unit 30 includes characters in an image format that indicate processing information such as the processing machine ID, product information, and processing conditions.

文字データ取得部４０は、撮像部３０が取得した画像データＰを画像補正し、補正後の画像データに含まれる画像形式の加工情報から、文字コードを生成する。詳しくは、文字データ取得部４０は、画像データＰを補正して補正画像データＰ２を生成する画像データ補正部５０と、補正画像データＰ２から文字データＴを生成する文字データ生成部６０とを備える。 The character data acquisition unit 40 performs image correction on the image data P acquired by the imaging unit 30, and generates a character code from image format processing information included in the corrected image data. Specifically, the character data acquisition unit 40 includes an image data correction unit 50 that corrects the image data P to generate corrected image data P2, and a character data generation unit 60 that generates character data T from the corrected image data P2. .

画像データ補正部５０は、まず、画像データＰにおいて文字データとして取得する加工情報が表示された領域を特定する。画像データ補正部５０は、加工機械１０Ａの表示部１１Ａにおいて取得する加工情報が表示された領域を特定するデータ領域情報５０ａを用いて、画像データＰから、所定の領域を切り出す。これにより、取得する加工情報のみが表示された画像データである取得領域画像データＰ１が生成される。データ領域情報５０ａは、後述する記憶部８０に記憶されてもよいし、加工機械用データ処理装置２０の外部に記憶されてもよい。 The image data correction unit 50 first identifies an area in the image data P in which processing information to be acquired as character data is displayed. The image data correction unit 50 cuts out a predetermined area from the image data P using data area information 50a that specifies the area where the processing information acquired on the display unit 11A of the processing machine 10A is displayed. As a result, acquisition area image data P1, which is image data in which only the processing information to be acquired is displayed, is generated. The data area information 50a may be stored in the storage unit 80, which will be described later, or may be stored outside the processing machine data processing device 20. FIG.

例えば、図２に示す例において、加工機械ＩＤ、製品情報及び加工条件１から４のうち、文字データを取得する加工情報が、加工機械ＩＤ、製品情報及び加工条件１である場合、データ領域情報５０ａは、図３に示すような、加工機械ＩＤ、製品情報及び加工条件１が表示される領域を特定する情報である。 For example, in the example shown in FIG. 2, among the processing machine ID, product information, and processing conditions 1 to 4, if the processing information for obtaining character data is processing machine ID, product information, and processing condition 1, data area information 50a is information specifying an area where the processing machine ID, product information, and processing conditions 1 are displayed, as shown in FIG.

画像データ補正部５０は、取得領域画像データＰ１に対して、公知の画像補正処理を用いて画像補正を行うことにより、補正画像データＰ２を生成する。 The image data correction unit 50 generates corrected image data P2 by performing image correction on the acquisition area image data P1 using a known image correction process.

例えば、画像データ補正部５０は、前記画像補正処理として、取得領域画像データＰ１の明度を検出し、暗い場合には、取得領域画像データＰ１を白黒反転する処理を行ってもよい。あるいは、画像データ補正部５０は、前記画像補正処理として、取得領域画像データＰ１をぼかし処理してから、二値化処理を行ってもよい。画像データ補正部５０は、これらの画像補正処理を、取得領域画像データＰ１を切り出す前に行ってもよい。また、画像データ補正部５０は、取得領域画像データＰ１を生成せずに、これらの画像補正処理を行ってもよい。 For example, as the image correction process, the image data correction unit 50 may detect the lightness of the acquisition area image data P1, and if it is dark, perform a process of black-and-white inversion of the acquisition area image data P1. Alternatively, as the image correction process, the image data correction unit 50 may blur the acquisition area image data P1 and then perform the binarization process. The image data correction unit 50 may perform these image correction processes before cutting out the acquisition area image data P1. Alternatively, the image data correction unit 50 may perform these image correction processes without generating the acquisition area image data P1.

文字データ生成部６０は、画像データ補正部５０の画像補正によって生成された補正画像データＰ２から、文字データＴを生成する。詳しくは、文字データ生成部６０は、処理前文字データ生成部６１と、文字データ変換部６２とを備える。 The character data generator 60 generates character data T from the corrected image data P2 generated by the image correction performed by the image data corrector 50 . Specifically, the character data generator 60 includes a pre-processed character data generator 61 and a character data converter 62 .

処理前文字データ生成部６１は、補正画像データＰ２に対して文字認識処理を行うことにより、補正画像データＰ２に含まれる画像形式の文字情報から文字コードによる文字データを取得する。これにより、画像形式の補正画像データＰ２から、処理前文字データＴ１が生成される。 The unprocessed character data generator 61 performs character recognition processing on the corrected image data P2 to acquire character data in character code from the image format character information included in the corrected image data P2. As a result, the unprocessed character data T1 is generated from the corrected image data P2 in the image format.

処理前文字データＴ１は、補正画像データＰ２に含まれる加工情報がそのまま文字情報に変換された文字データである。すなわち、データ領域情報５０ａによって切り出された領域が、例えば加工機械ＩＤ、製品情報及び加工条件１を表示する領域であった場合、処理前文字データＴ１は、加工機械ＩＤ、製品情報及び加工条件１の文字データである。 The unprocessed character data T1 is character data in which the processing information included in the corrected image data P2 is converted into character information as it is. That is, if the area cut out by the data area information 50a is, for example, an area for displaying the processing machine ID, the product information, and the processing condition 1, the pre-processed character data T1 includes the processing machine ID, the product information, and the processing condition 1. is the character data of

文字データ変換部６２は、処理前文字データＴ１に含まれる所定の文字を他の文字に変換して、文字データＴを生成する。詳しくは、文字データ変換部６２は、図４に示すような、変換前の文字及び変換後の文字が登録された文字変換情報６２ａを用いて、処理前文字データＴ１から、文字データＴを生成する。これにより、要求される文字データＴが生成される。文字変換情報６２ａは、後述する記憶部８０に記憶されてもよいし、加工機械用データ処理装置２０の外部に記憶されてもよい。 The character data conversion unit 62 converts a predetermined character included in the unprocessed character data T1 into another character to generate character data T. FIG. Specifically, the character data conversion unit 62 generates character data T from the unprocessed character data T1 using character conversion information 62a in which characters before conversion and characters after conversion are registered as shown in FIG. do. As a result, the requested character data T is generated. The character conversion information 62a may be stored in the storage unit 80, which will be described later, or may be stored outside the processing machine data processor 20. FIG.

例えば、処理前文字データＴ１が「製品情報：Ｘ１２３４５~（改行）加工条件１：５０ＭＰａ」であって、文字変換情報６２ａに、「チルダ（~）を削除する」と登録されているとする。この場合、処理前文字データＴ１「製品情報：Ｘ１２３４５~（改行）加工条件１：５０ＭＰａ」に含まれるチルダが削除されて、文字データＴ「製品情報：Ｘ１２３４５（改行）加工条件１：５０ＭＰａ」が生成される。 For example, it is assumed that the unprocessed character data T1 is "product information: X12345~(line feed) processing condition 1: 50 MPa" and "delete tilde (~)" is registered in the character conversion information 62a. In this case, the tilde included in the unprocessed character data T1 "product information: X12345 ~ (line feed) processing condition 1: 50 MPa" is deleted, and the character data T "product information: X12345 (line feed) processing condition 1: 50 MPa" is changed to generated.

すなわち、文字データ生成部６０は、補正画像データＰ２から処理前文字データＴ１を生成する処理前文字データ生成部６１と、文字変換情報６２ａに基づいて、処理前文字データＴ１を文字データＴに変換する文字データ変換部６２とを備える。これにより、補正画像データＰ２から得られた処理前文字データＴ１を、文字変換情報６２ａに基づいて、要求される文字データＴに容易に変換することができる。 That is, the character data generator 60 converts the unprocessed character data T1 into the character data T based on the unprocessed character data generator 61 that generates the unprocessed character data T1 from the corrected image data P2 and the character conversion information 62a. and a character data conversion unit 62 for converting. As a result, the unprocessed character data T1 obtained from the corrected image data P2 can be easily converted into the required character data T based on the character conversion information 62a.

文字データ出力部７０は、文字データ取得部４０が取得した文字データＴを、加工機械用データ処理装置２０の外部に出力する。本実施形態においては、出力された文字データＴは、後述する制御装置９０に入力される。 The character data output unit 70 outputs the character data T acquired by the character data acquisition unit 40 to the outside of the processing machine data processing device 20 . In this embodiment, the output character data T is input to the control device 90, which will be described later.

記憶部８０は、撮像部３０によって撮像された画像データＰ及び文字データ取得部４０が取得した文字データＴの両方を記憶する。これにより、加工機械１０Ａの表示部１１Ａに表示される加工情報に関する画像である画像データＰと、画像データＰから得られる文字データＴとを、記憶部８０に蓄積することができる。 The storage unit 80 stores both the image data P imaged by the imaging unit 30 and the character data T acquired by the character data acquisition unit 40 . Accordingly, the image data P, which is an image related to the processing information displayed on the display unit 11A of the processing machine 10A, and the character data T obtained from the image data P can be accumulated in the storage unit 80. FIG.

以上の構成により、加工機械用データ処理装置２０は、加工機械１０Ａの表示部１１Ａに表示される加工情報に関する画像を撮像して画像データＰを取得する撮像部３０と、画像データＰから文字データＴを取得する文字データ取得部４０と、文字データＴを出力する文字データ出力部７０とを備える。 With the above configuration, the processing machine data processing device 20 includes the image capturing unit 30 that captures an image related to the processing information displayed on the display unit 11A of the processing machine 10A and acquires the image data P, and the character data from the image data P. A character data acquisition unit 40 for acquiring T and a character data output unit 70 for outputting the character data T are provided.

これにより、加工機械１０Ａの表示部１１Ａに表示された画像に含まれる文字情報を、撮像部３０によって取得された画像データＰから文字データＴとして取得することができる。よって、加工機械１０Ａが加工情報を外部に出力する出力端子を有していない場合、前記出力端子の規格が加工機械の種類によって異なる場合、及び、加工機械１０Ａの表示部１１Ａにおける情報の表示形式が異なる場合などでも、加工機械１０Ａから必要な文字情報を取得することができる。 Thereby, the character information included in the image displayed on the display unit 11A of the processing machine 10A can be acquired as the character data T from the image data P acquired by the imaging unit 30. FIG. Therefore, when the processing machine 10A does not have an output terminal for outputting the processing information to the outside, when the standard of the output terminal differs depending on the type of processing machine, and when the information display format on the display unit 11A of the processing machine 10A is different, the necessary character information can be acquired from the processing machine 10A.

また、文字データ取得部４０は、画像データＰを補正して補正画像データＰ２を生成する画像データ補正部５０と、補正画像データから文字データＴを生成する文字データ生成部６０とを備える。これにより、撮像部３０が取得した画像データＰを、文字データＴの取得に適した補正画像データＰ２に補正することができる。よって、画像データＰから文字データＴを生成する精度を向上することができる。 The character data acquisition unit 40 also includes an image data correction unit 50 that corrects the image data P to generate corrected image data P2, and a character data generation unit 60 that generates character data T from the corrected image data. Accordingly, the image data P acquired by the imaging unit 30 can be corrected to the corrected image data P2 suitable for acquiring the character data T. FIG. Therefore, the accuracy of generating the character data T from the image data P can be improved.

また、画像データ補正部５０は、加工機械１０Ａの表示部１１Ａにおいて文字データＴを取得する領域を特定するデータ領域情報５０ａに基づいて、画像データＰから取得領域画像データＰ１を切り出して、補正画像データＰ２を生成する。文字データ生成部６０は、補正画像データＰ２から文字データＴを生成する。これにより、加工機械１０Ａの表示部１１Ａに表示された画像の中から、必要な文字データＴだけを取得して出力することができる。 Further, the image data correction unit 50 cuts out the acquisition area image data P1 from the image data P based on the data area information 50a specifying the area from which the character data T is acquired in the display unit 11A of the processing machine 10A, and produces a corrected image. Generate data P2. The character data generator 60 generates character data T from the corrected image data P2. This makes it possible to obtain and output only the necessary character data T from the image displayed on the display section 11A of the processing machine 10A.

（制御装置）
次に、図１を参照して、制御装置９０について説明する。制御装置９０は、加工機械用データ処理装置２０を介して、加工機械１０Ａの表示部１１Ａに表示された画像から、加工機械１０Ａの加工情報を文字データＴとして取得し、取得したデータから加工機械１０Ｂで利用する加工情報（データ）を生成する。詳しくは、制御装置９０は、データ取得部９１と、加工情報生成部９２と、加工情報出力部９３と、を備える。 (Control device)
Next, the control device 90 will be described with reference to FIG. The control device 90 acquires the processing information of the processing machine 10A as character data T from the image displayed on the display unit 11A of the processing machine 10A via the data processing device 20 for the processing machine. 10B to generate processing information (data). Specifically, the control device 90 includes a data acquisition section 91 , a processing information generation section 92 , and a processing information output section 93 .

データ取得部９１は、加工機械用データ処理装置２０の文字データ出力部７０から出力された文字データＴを取得する。文字データＴは、加工機械１０Ａの表示部１１Ａに表示された加工機械１０Ａの加工情報である。 The data acquisition unit 91 acquires the character data T output from the character data output unit 70 of the processing machine data processing device 20 . The character data T is processing information of the processing machine 10A displayed on the display section 11A of the processing machine 10A.

加工情報生成部９２は、データ取得部９１が取得した文字データＴから、加工機械１０Ｂで利用可能なデータ形式の加工情報を生成する。 The processing information generation unit 92 generates processing information in a data format that can be used by the processing machine 10B from the character data T acquired by the data acquisition unit 91 .

加工情報出力部９３は、加工情報生成部９２が生成した加工情報を制御装置９０の外部に出力する。本実施形態においては、出力された加工情報は、加工機械１０Ｂに入力される。 The processed information output unit 93 outputs the processed information generated by the processed information generation unit 92 to the outside of the control device 90 . In this embodiment, the output processing information is input to the processing machine 10B.

次に、加工機械用データ管理システム１の動作について説明する。加工機械用データ管理システム１は、加工機械用データ処理装置２０が、加工機械１０Ａから文字データＴを取得する処理と、制御装置９０が、前記取得した文字データＴから加工機械１０Ｂで利用する加工情報を生成し、加工機械１０Ｂに出力する処理とを行う。 Next, the operation of the processing machine data management system 1 will be described. The processing machine data management system 1 includes a process in which the processing machine data processing device 20 obtains character data T from the processing machine 10A, and a control device 90 performs processing to be used in the processing machine 10B from the obtained character data T. and a process of generating information and outputting it to the processing machine 10B.

（文字データ取得動作）
まず、加工機械用データ処理装置２０が文字データを取得する動作について、図５及び図６を参照して説明する。図５は、加工機械用データ処理装置２０が、加工機械１０Ａの表示部１１Ａに表示された加工情報から文字データを取得する動作を示すフローチャートである。図６は、画像データＰから文字データＴへの変換を模式的に示す図である。 (Character data acquisition operation)
First, the operation of the processing machine data processing device 20 for acquiring character data will be described with reference to FIGS. 5 and 6. FIG. FIG. 5 is a flow chart showing the operation of the processing machine data processing device 20 for acquiring character data from the processing information displayed on the display unit 11A of the processing machine 10A. FIG. 6 is a diagram schematically showing conversion from image data P to character data T. As shown in FIG.

図５に示すフローがスタートすると（ＳＴＡＲＴ）、まず、加工機械用データ処理装置２０の撮像部３０は、加工機械１０Ａの表示部１１Ａに表示される加工情報に関する画像を撮像する。これにより、加工情報に関する文字情報が含まれた画像データＰが取得される（ステップＳＡ１）。図６（ａ）に、画像データＰの例を示す。 When the flow shown in FIG. 5 starts (START), first, the imaging unit 30 of the processing machine data processing device 20 captures an image related to processing information displayed on the display unit 11A of the processing machine 10A. As a result, the image data P containing the character information related to the processing information is acquired (step SA1). An example of the image data P is shown in FIG.

次に、画像データ補正部５０は、画像データＰにおいて文字データを取得する領域を特定するデータ領域情報５０ａに基づいて、画像データＰから、取得領域画像データＰ１を切り出すとともに、取得領域画像データＰ１を補正して補正画像データＰ２を生成する。（ステップＳＡ２）。補正画像データＰ２は、加工情報に関して必要な文字情報のみが含まれ、画像補正された画像データである。図６（ｂ）に、補正画像データＰ２の例を示す。 Next, the image data correction unit 50 cuts out the acquisition area image data P1 from the image data P based on the data area information 50a specifying the area from which the character data is to be acquired in the image data P, and extracts the acquisition area image data P1. is corrected to generate corrected image data P2. (Step SA2). The corrected image data P2 is image data that contains only text information necessary for processing information and that has undergone image correction. FIG. 6B shows an example of corrected image data P2.

補正画像データＰ２が生成されると、処理前文字データ生成部６１は、補正画像データＰ２から処理前文字データＴ１を生成する（ステップＳＡ３）。処理前文字データＴ１は、取得領域画像データＰ１に含まれる画像形式の文字情報を文字認識により文字コードに変換したものである。図６（ｃ）に、処理前文字データＴ１の例を示す。 After the corrected image data P2 is generated, the unprocessed character data generator 61 generates unprocessed character data T1 from the corrected image data P2 (step SA3). The unprocessed character data T1 is obtained by converting character information in an image format included in the acquired region image data P1 into character codes by character recognition. FIG. 6(c) shows an example of the unprocessed character data T1.

次に、文字データ変換部６２は、文字変換情報６２ａに基づいて、処理前文字データＴ１を文字データＴに変換する（ステップＳＡ４）。これにより、処理前文字データＴ１から要求される文字データＴが生成される。図６（ｄ）に、文字データＴの例を示す。 Next, the character data converter 62 converts the unprocessed character data T1 into character data T based on the character conversion information 62a (step SA4). As a result, the required character data T is generated from the unprocessed character data T1. An example of character data T is shown in FIG.

その後、文字データＴは、文字データ出力部７０から制御装置９０に出力され（ステップＳＡ５）、フローは終了する（ＥＮＤ）。 After that, the character data T is output from the character data output unit 70 to the control device 90 (step SA5), and the flow ends (END).

以上の処理により、制御装置９０のデータ取得部９１は、加工機械１０Ａの加工情報を文字データＴとして取得する。すなわち、制御装置９０は、加工機械１０Ａの表示部１１Ａに表示された画像に含まれる文字情報を、文字データＴとして取得することができる。これにより、加工機械が加工情報を外部に出力する出力端子を有していない場合、前記出力端子の規格が加工機械の種類によって異なる場合、及び、加工機械の表示部１１Ａにおける情報の表示形式が異なる場合などでも、加工機械用データ管理システム１は、加工機械から必要な文字情報を取得することができる。 Through the above processing, the data acquisition unit 91 of the control device 90 acquires the processing information of the processing machine 10A as the character data T. FIG. That is, the control device 90 can obtain, as the character data T, character information included in the image displayed on the display section 11A of the processing machine 10A. As a result, when the processing machine does not have an output terminal for outputting the processing information to the outside, when the standard of the output terminal differs depending on the type of the processing machine, and when the display format of the information on the display section 11A of the processing machine is Even if it is different, the processing machine data management system 1 can acquire the necessary character information from the processing machine.

（加工情報出力動作）
次に、制御装置９０が加工機械用データ処理装置２０から文字データＴを取得し、加工機械１０Ｂで利用する加工情報を加工機械１０Ｂに出力する動作を、図７を参照して説明する。 (Processing information output operation)
Next, the operation of the control device 90 acquiring the character data T from the processing machine data processing device 20 and outputting the processing information used by the processing machine 10B to the processing machine 10B will be described with reference to FIG.

図７に示すフローがスタートすると（ＳＴＡＲＴ）、加工情報生成部９２は、データ取得部９１が取得した文字データＴから加工機械１０Ｂで利用可能な形式の加工情報を生成する（ステップＳＢ１、ＳＢ２）。前記生成された加工情報は、加工情報出力部９３より出力され、加工機械１０Ｂに入力される（ステップＳＢ３）。その後、フローは終了する（ＥＮＤ）。 When the flow shown in FIG. 7 starts (START), the processing information generation unit 92 generates processing information in a format that can be used by the processing machine 10B from the character data T acquired by the data acquisition unit 91 (steps SB1 and SB2). . The generated processing information is output from the processing information output unit 93 and input to the processing machine 10B (step SB3). After that, the flow ends (END).

以上の処理により、加工機械用データ管理システム１は、データ取得部９１が取得したデータから加工機械１０Ｂで利用可能な加工情報を生成し、前記加工情報を加工機械１０Ｂで利用することができる。 Through the above processing, the processing machine data management system 1 can generate processing information that can be used in the processing machine 10B from the data acquired by the data acquisition unit 91, and can use the processing information in the processing machine 10B.

このように、加工機械用データ管理システム１は、加工機械１０Ａ、１０Ｂと、加工機械用データ処理装置２０と、制御装置９０とを備える。制御装置９０は、加工機械用データ処理装置２０から出力された文字データＴを取得して、文字データＴから加工機械１０Ｂで利用可能なデータを生成する。加工機械１０Ｂに前記データが入力される。これにより、加工機械が加工情報を外部に出力する出力端子を有していない場合、前記出力端子の規格が加工機械の種類によって異なる場合、及び、加工機械の表示部における情報の表示形式が異なる場合などでも、加工情報を取得でき、前記加工情報を加工機械で利用することができる。 Thus, the processing machine data management system 1 includes the processing machines 10A and 10B, the processing machine data processing device 20, and the control device 90. FIG. The control device 90 acquires the character data T output from the processing machine data processing device 20 and generates from the character data T data that can be used by the processing machine 10B. The data is input to the processing machine 10B. As a result, when the processing machine does not have an output terminal for outputting processing information to the outside, when the standard of the output terminal differs depending on the type of processing machine, and when the information display format on the display unit of the processing machine differs. Even in such a case, the processing information can be acquired, and the processing information can be used by the processing machine.

（その他の実施形態）
上記実施形態において、加工機械用データ管理システム１は、２つの加工機械１０Ａ及び１０Ｂを備える。しかしながら、加工機械用データ管理システムは、１つの加工機械を備える構成であってもよい。あるいは、加工機械用データ管理システムは、３つ以上の加工機械を備える構成であってもよい。 (Other embodiments)
In the above embodiment, the processing machine data management system 1 includes two processing machines 10A and 10B. However, the processing machine data management system may be configured to include one processing machine. Alternatively, the processing machine data management system may be configured to include three or more processing machines.

上記実施形態において、加工機械用データ処理装置２０の記憶部８０は、文字データ取得部４０が処理した画像データＰと文字データＴの両方を記憶する。しかしながら、加工機械用データ処理装置の記憶部は、画像データＰ及び文字データＴのうち少なくとも一方を記憶する構成であってもよい。あるいは、加工機械用データ処理装置は記憶部を備えない構成であってもよい。 In the above embodiment, the storage unit 80 of the processing machine data processing device 20 stores both the image data P and the character data T processed by the character data acquisition unit 40 . However, the storage unit of the processing machine data processing device may be configured to store at least one of the image data P and the character data T. FIG. Alternatively, the processing machine data processing device may be configured without a storage unit.

上記実施形態において、文字データ取得部４０は、撮像部３０が取得した画像データＰを画像データ補正部５０で補正し、補正後の補正画像データＰ２から文字データＴを生成する。しかしながら、文字データ生成部は、撮像部によって取得された画像データから文字データを生成する構成であってもよい。すなわち、文字データ取得部は、画像データから処理前文字データを生成する処理前文字データ生成部と、文字変換情報に基づいて、処理前文字データを文字データに変換する文字データ変換部とを備える構成であってもよい。これにより、画像データから得られた処理前文字データを、文字変換情報に基づいて、要求される文字データに容易に変換することができる。 In the above embodiment, the character data acquisition unit 40 corrects the image data P acquired by the imaging unit 30 by the image data correction unit 50, and generates the character data T from the corrected image data P2 after correction. However, the character data generating section may be configured to generate character data from the image data acquired by the imaging section. That is, the character data acquisition unit includes an unprocessed character data generation unit that generates unprocessed character data from image data, and a character data conversion unit that converts the unprocessed character data into character data based on the character conversion information. It may be a configuration. As a result, the unprocessed character data obtained from the image data can be easily converted into the required character data based on the character conversion information.

上記実施形態において、制御装置９０の加工情報出力部９３は、加工情報生成部９２が生成した加工情報を加工機械１０Ｂに出力する。しかしながら、加工情報出力部９３が出力した前記加工情報は、制御装置９０が有する出力端子、モニター又はプリンターなどに出力される構成であってもよい。また、加工情報出力部は、加工情報生成部が生成した加工情報を、加工機械用データ処理装置が文字データを取得した加工機械に入力してもよい。 In the above embodiment, the processing information output unit 93 of the control device 90 outputs the processing information generated by the processing information generation unit 92 to the processing machine 10B. However, the processing information output by the processing information output unit 93 may be configured to be output to an output terminal of the control device 90, a monitor, a printer, or the like. Further, the processing information output unit may input the processing information generated by the processing information generation unit to the processing machine from which the processing machine data processing device has acquired the character data.

本発明は、加工情報を外部に出力できない加工機械から加工情報に関するデータを取得する場合に利用可能である。 INDUSTRIAL APPLICABILITY The present invention can be used when acquiring data on processing information from a processing machine that cannot output processing information to the outside.

１ 加工機械用データ管理システム
１０Ａ、１０Ｂ 加工機械
１１Ａ、１１Ｂ 表示部
２０ 加工機械用データ処理装置
３０ 撮像部
４０ 文字データ取得部
５０ 画像データ補正部
５０ａ データ領域情報
６０ 文字データ生成部
６１ 処理前文字データ生成部
６２ 文字データ変換部
６２ａ 文字変換情報
７０ 文字データ出力部
８０ 記憶部
９０ 制御装置
９１ データ取得部
９２ 加工情報生成部
９３ 加工情報出力部 1 processing machine data management system 10A, 10B processing machines 11A, 11B display unit 20 processing machine data processing device 30 imaging unit 40 character data acquisition unit 50 image data correction unit 50a data area information 60 character data generation unit 61 characters before processing Data generation unit 62 Character data conversion unit 62a Character conversion information 70 Character data output unit 80 Storage unit 90 Control device 91 Data acquisition unit 92 Processing information generation unit 93 Processing information output unit

Claims (6)

加工機械の表示部に表示される加工情報に関する画像を撮像して画像データを取得する撮像部と、
前記撮像部によって取得された画像データから補正画像データを生成する画像データ補正部と、
前記補正画像データから文字データを取得する文字データ取得部と、
前記文字データを出力する文字データ出力部と、
を備え、
前記画像データ補正部は、前記撮像部によって取得された画像データから複数の加工情報が表示された領域を特定して、前記複数の加工情報が表示された前記補正画像データを生成する、
加工機械用データ処理装置。 an imaging unit that acquires image data by capturing an image related to processing information displayed on a display unit of the processing machine;
an image data correction unit that generates corrected image data from the image data acquired by the imaging unit;
a character data obtaining unit that obtains character data from the corrected image data;
a character data output unit that outputs the character data;
with
The image data correcting unit identifies an area in which a plurality of pieces of processing information are displayed from the image data acquired by the imaging unit, and generates the corrected image data in which the plurality of pieces of processing information are displayed.
Data processing equipment for processing machines . 請求項１に記載の加工機械用データ処理装置において、
前記画像データ補正部は、前記加工機械の表示部において前記文字データを取得する領域を特定するデータ領域情報に基づいて、前記画像データから取得領域画像データを切り出して、前記補正画像データを生成し、
前記文字データ取得部は、前記補正画像データから前記文字データを生成する文字データ生成部をさらに有する、
加工機械用データ処理装置。 In the processing machine data processing device according to claim 1 ,
The image data correction unit cuts out the acquisition area image data from the image data based on data area information specifying an area from which the character data is acquired on the display unit of the processing machine, and generates the corrected image data. ,
The character data acquisition unit further includes a character data generation unit that generates the character data from the corrected image data,
Data processing equipment for processing machines. 請求項２に記載の加工機械用データ処理装置において、
前記文字データ生成部は、
前記補正画像データから処理前文字データを生成する処理前文字データ生成部と、
文字変換情報に基づいて、前記処理前文字データを前記文字データに変換する文字データ変換部と、
を備える、
加工機械用データ処理装置。 In the processing machine data processing device according to claim 2 ,
The character data generation unit
an unprocessed character data generation unit that generates unprocessed character data from the corrected image data;
a character data conversion unit that converts the pre-processed character data into the character data based on character conversion information;
comprising a
Data processing equipment for processing machines. 請求項１に記載の加工機械用データ処理装置において、
前記文字データ取得部は、
前記補正画像データから処理前文字データを生成する処理前文字データ生成部と、
文字変換情報に基づいて、前記処理前文字データを前記文字データに変換する文字データ変換部と、
を備える、
加工機械用データ処理装置。 In the processing machine data processing device according to claim 1,
The character data acquisition unit
an unprocessed character data generation unit that generates unprocessed character data from the corrected image data;
a character data conversion unit that converts the pre-processed character data into the character data based on character conversion information;
comprising
Data processing equipment for processing machines. 請求項１に記載の加工機械用データ処理装置において、
前記画像データと前記文字データとを記憶する記憶部をさらに備える、
加工機械用データ処理装置。 In the processing machine data processing device according to claim 1,
further comprising a storage unit that stores the image data and the character data;
Data processing equipment for processing machines. 加工機械と、
請求項１から５のいずれか一つに記載の加工機械用データ処理装置と、
制御装置と、
を備え、
前記制御装置は、前記加工機械用データ処理装置から出力された文字データを取得して、前記文字データから加工機械で利用するデータを生成し、
前記加工機械に前記データが入力される、
加工機械用生産管理システム。 processing machinery;
a processing machine data processing device according to any one of claims 1 to 5 ;
a controller;
with
The control device acquires character data output from the processing machine data processing device, generates data to be used by the processing machine from the character data, and
the data is input to the processing machine;
Production control system for processing machines.
JP2018181795A 2018-09-27 2018-09-27 Processing machine data processing device and processing machine data management system Active JP7180245B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018181795A JP7180245B2 (en) 2018-09-27 2018-09-27 Processing machine data processing device and processing machine data management system
CN201910841168.8A CN110956175A (en) 2018-09-27 2019-09-06 Processing machine data processing device and processing machine data management system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018181795A JP7180245B2 (en) 2018-09-27 2018-09-27 Processing machine data processing device and processing machine data management system

Publications (2)

Publication Number Publication Date
JP2020052754A JP2020052754A (en) 2020-04-02
JP7180245B2 true JP7180245B2 (en) 2022-11-30

Family

ID=69975495

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018181795A Active JP7180245B2 (en) 2018-09-27 2018-09-27 Processing machine data processing device and processing machine data management system

Country Status (2)

Country Link
JP (1) JP7180245B2 (en)
CN (1) CN110956175A (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013161395A (en) 2012-02-08 2013-08-19 Asahi Glass Co Ltd Data management system, management data extraction method and management data extraction program

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008252680A (en) * 2007-03-30 2008-10-16 Omron Corp Program for portable terminal device, and the portable terminal device
WO2009107921A1 (en) * 2008-02-29 2009-09-03 Ral Ra Lee Print sheet for the mini-album, kit for producing the mini-album using said print sheet, mini-album using said print sheet, and producing method of said mini-album
JP4924721B2 (en) * 2010-01-20 2012-04-25 カシオ計算機株式会社 Mobile terminal and material bank management system
JP5502211B2 (en) * 2011-01-17 2014-05-28 パナソニック株式会社 Stereoscopic image processing apparatus and stereoscopic image processing method
JP5791908B2 (en) * 2011-01-18 2015-10-07 オリンパス株式会社 ADJUSTMENT DEVICE, LASER PROCESSING DEVICE, AND ADJUSTMENT METHOD
JP6075180B2 (en) * 2013-04-18 2017-02-08 オムロン株式会社 Work management system and work management method
US10140767B2 (en) * 2013-04-24 2018-11-27 Kawasaki Jukogyo Kabushiki Kaisha Workpiece machining work support system and workpiece machining method
JP6293273B2 (en) * 2014-06-19 2018-03-14 株式会社牧野フライス製作所 Machine tool controller
CN104899601A (en) * 2015-05-29 2015-09-09 西安电子科技大学宁波信息技术研究院 Identification method of handwritten Uyghur words
JP2017069963A (en) * 2015-09-30 2017-04-06 株式会社ソフィックス Data collection system of display panel and operation panel, device, method, program and recording medium
US10412303B2 (en) * 2016-07-21 2019-09-10 Olympus Corporation Imaging device, startup method of imaging device, and computer readable recording medium
CN106355590B (en) * 2016-11-23 2023-03-31 河北工业大学 Mold residue visual detection method and device based on image difference making

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013161395A (en) 2012-02-08 2013-08-19 Asahi Glass Co Ltd Data management system, management data extraction method and management data extraction program

Also Published As

Publication number Publication date
JP2020052754A (en) 2020-04-02
CN110956175A (en) 2020-04-03

Similar Documents

Publication Publication Date Title
CN110301137B (en) Video transmission apparatus and video reception apparatus
EP1580976A3 (en) Image processing apparatus, image data generation and transmission method and image data generation and transmission program
CN114063703B (en) Data synchronization method, device, data processing equipment and storage medium
JP7180245B2 (en) Processing machine data processing device and processing machine data management system
JP2021007247A5 (en)
US9609304B2 (en) 3-dimensional data processing apparatus and method
CN103327270A (en) Image processing method, device and terminal
CN114708150A (en) Scanning data processing method and device, electronic equipment and medium
CN113283347B (en) Assembly job guidance method, device, system, server and readable storage medium
JP2015103915A (en) Image processing system and image processing method
US20140136620A1 (en) Protocol conversion apparatus and method
CN110866452A (en) Optical imaging satellite original data real-time target detection slice obtaining method
JP2011211625A (en) Transmission device, transmission method and program
US20090073276A1 (en) Image processing system, method thereof and image capturing device with image processing system
JP6334442B2 (en) Program, information processing apparatus, and data processing method
EP2117227B1 (en) Data transfer device, image stabilisation system and imaging unit
CN113808147A (en) Image processing method, device and system and computer equipment
KR20130125641A (en) Blackbox apparatus
JP5239878B2 (en) Stereoscopic image creation system, terminal device, and stereoscopic image providing device
CN113656368B (en) Cloud platform log processing method and system
JP2017017609A (en) Image processing device
CN107979631B (en) Data synchronization method and device
CN107302595B (en) Data transmission method and system for generating animation
TW200511780A (en) Mail processing system and method
JP2019029834A (en) Imaging apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211029

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211102

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211221

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220517

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220802

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20220802

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20220815

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20220816

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221018

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221031

R151 Written notification of patent or utility model registration

Ref document number: 7180245

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151