]> git.proxmox.com Git - mirror_edk2.git/blobdiff - MdeModulePkg/Universal/RegularExpressionDxe/Oniguruma/oniguruma.h
MdeModulePkg RegularExpressionDxe: Update Oniguruma to 6.9.0
[mirror_edk2.git] / MdeModulePkg / Universal / RegularExpressionDxe / Oniguruma / oniguruma.h
index 462565aeca1389f3380fdbd158a3e47850d4ccde..5f31a91c67f1465bbe0bedf13105c66fc6f6cdb9 100644 (file)
@@ -4,7 +4,7 @@
   oniguruma.h - Oniguruma (regular expression library)\r
 **********************************************************************/\r
 /*-\r
- * Copyright (c) 2002-2009  K.Kosako  <sndgk393 AT ybb DOT ne DOT jp>\r
+ * Copyright (c) 2002-2018  K.Kosako  <sndgk393 AT ybb DOT ne DOT jp>\r
  * All rights reserved.\r
  *\r
  * Redistribution and use in source and binary forms, with or without\r
@@ -36,31 +36,11 @@ extern "C" {
 #endif\r
 \r
 #define ONIGURUMA\r
-#define ONIGURUMA_VERSION_MAJOR   5\r
+#define ONIGURUMA_VERSION_MAJOR   6\r
 #define ONIGURUMA_VERSION_MINOR   9\r
-#define ONIGURUMA_VERSION_TEENY   6\r
+#define ONIGURUMA_VERSION_TEENY   0\r
 \r
-#ifdef __cplusplus\r
-# ifndef  HAVE_PROTOTYPES\r
-#  define HAVE_PROTOTYPES 1\r
-# endif\r
-# ifndef  HAVE_STDARG_PROTOTYPES\r
-#  define HAVE_STDARG_PROTOTYPES 1\r
-# endif\r
-#endif\r
-\r
-/* escape Mac OS X/Xcode 2.4/gcc 4.0.1 problem */\r
-#if defined(__APPLE__) && defined(__GNUC__) && __GNUC__ >= 4\r
-# ifndef  HAVE_STDARG_PROTOTYPES\r
-#  define HAVE_STDARG_PROTOTYPES 1\r
-# endif\r
-#endif\r
-\r
-#ifdef HAVE_STDARG_H\r
-# ifndef  HAVE_STDARG_PROTOTYPES\r
-#  define HAVE_STDARG_PROTOTYPES 1\r
-# endif\r
-#endif\r
+#define ONIGURUMA_VERSION_INT     60900\r
 \r
 #ifndef P_\r
 #if defined(__STDC__) || defined(_WIN32)\r
@@ -71,16 +51,12 @@ extern "C" {
 #endif\r
 \r
 #ifndef PV_\r
-#ifdef HAVE_STDARG_PROTOTYPES\r
 # define PV_(args) args\r
-#else\r
-# define PV_(args) ()\r
-#endif\r
 #endif\r
 \r
 #ifndef ONIG_EXTERN\r
 #if defined(_WIN32) && !defined(__GNUC__)\r
-#if defined(EXPORT) || defined(RUBY_EXPORT)\r
+#if defined(ONIGURUMA_EXPORT)\r
 #define ONIG_EXTERN   extern __declspec(dllexport)\r
 #else\r
 #define ONIG_EXTERN   extern __declspec(dllimport)\r
@@ -98,17 +74,12 @@ extern "C" {
 #define UChar OnigUChar\r
 #endif\r
 \r
-#ifdef _WIN32\r
-# include <windows.h>\r
-typedef ULONG_PTR OnigCodePoint;\r
-#else\r
-typedef unsigned long  OnigCodePoint;\r
-#endif\r
+typedef unsigned int   OnigCodePoint;\r
 typedef unsigned char  OnigUChar;\r
 typedef unsigned int   OnigCtype;\r
-typedef unsigned int   OnigDistance;\r
+typedef unsigned int   OnigLen;\r
 \r
-#define ONIG_INFINITE_DISTANCE  ~((OnigDistance )0)\r
+#define ONIG_INFINITE_DISTANCE  ~((OnigLen )0)\r
 \r
 typedef unsigned int OnigCaseFoldType; /* case fold flag */\r
 \r
@@ -146,7 +117,7 @@ typedef struct {
   OnigCodePoint one_or_more_time;\r
   OnigCodePoint anychar_anytime;\r
 } OnigMetaCharTableType;\r
-  \r
+\r
 typedef int (*OnigApplyAllCaseFoldFunc)(OnigCodePoint from, OnigCodePoint* to, int to_len, void* arg);\r
 \r
 typedef struct OnigEncodingTypeST {\r
@@ -166,6 +137,12 @@ typedef struct OnigEncodingTypeST {
   int    (*get_ctype_code_range)(OnigCtype ctype, OnigCodePoint* sb_out, const OnigCodePoint* ranges[]);\r
   OnigUChar* (*left_adjust_char_head)(const OnigUChar* start, const OnigUChar* p);\r
   int    (*is_allowed_reverse_match)(const OnigUChar* p, const OnigUChar* end);\r
+  int    (*init)(void);\r
+  int    (*is_initialized)(void);\r
+  int    (*is_valid_mbc_string)(const OnigUChar* s, const OnigUChar* end);\r
+  unsigned int flag;\r
+  OnigCodePoint sb_range;\r
+  int index;\r
 } OnigEncodingType;\r
 \r
 typedef OnigEncodingType* OnigEncoding;\r
@@ -243,21 +220,24 @@ ONIG_EXTERN OnigEncodingType OnigEncodingGB18030;
 /* 18: 6(max-byte) * 3(case-fold chars) */\r
 \r
 /* character types */\r
-#define ONIGENC_CTYPE_NEWLINE   0\r
-#define ONIGENC_CTYPE_ALPHA     1\r
-#define ONIGENC_CTYPE_BLANK     2\r
-#define ONIGENC_CTYPE_CNTRL     3\r
-#define ONIGENC_CTYPE_DIGIT     4\r
-#define ONIGENC_CTYPE_GRAPH     5\r
-#define ONIGENC_CTYPE_LOWER     6\r
-#define ONIGENC_CTYPE_PRINT     7\r
-#define ONIGENC_CTYPE_PUNCT     8\r
-#define ONIGENC_CTYPE_SPACE     9\r
-#define ONIGENC_CTYPE_UPPER    10\r
-#define ONIGENC_CTYPE_XDIGIT   11\r
-#define ONIGENC_CTYPE_WORD     12\r
-#define ONIGENC_CTYPE_ALNUM    13  /* alpha || digit */\r
-#define ONIGENC_CTYPE_ASCII    14\r
+typedef enum {\r
+  ONIGENC_CTYPE_NEWLINE = 0,\r
+  ONIGENC_CTYPE_ALPHA   = 1,\r
+  ONIGENC_CTYPE_BLANK   = 2,\r
+  ONIGENC_CTYPE_CNTRL   = 3,\r
+  ONIGENC_CTYPE_DIGIT   = 4,\r
+  ONIGENC_CTYPE_GRAPH   = 5,\r
+  ONIGENC_CTYPE_LOWER   = 6,\r
+  ONIGENC_CTYPE_PRINT   = 7,\r
+  ONIGENC_CTYPE_PUNCT   = 8,\r
+  ONIGENC_CTYPE_SPACE   = 9,\r
+  ONIGENC_CTYPE_UPPER   = 10,\r
+  ONIGENC_CTYPE_XDIGIT  = 11,\r
+  ONIGENC_CTYPE_WORD    = 12,\r
+  ONIGENC_CTYPE_ALNUM   = 13,  /* alpha || digit */\r
+  ONIGENC_CTYPE_ASCII   = 14\r
+} OnigEncCtype;\r
+\r
 #define ONIGENC_MAX_STD_CTYPE  ONIGENC_CTYPE_ASCII\r
 \r
 \r
@@ -270,7 +250,7 @@ ONIG_EXTERN OnigEncodingType OnigEncodingGB18030;
 #define ONIGENC_IS_CODE_ASCII(code)       ((code) < 128)\r
 #define ONIGENC_IS_MBC_WORD(enc,s,end) \\r
    ONIGENC_IS_CODE_WORD(enc,ONIGENC_MBC_TO_CODE(enc,s,end))\r
-\r
+#define ONIGENC_IS_MBC_WORD_ASCII(enc,s,end) onigenc_is_mbc_word_ascii(enc,s,end)\r
 \r
 #define ONIGENC_NAME(enc)                      ((enc)->name)\r
 \r
@@ -280,6 +260,8 @@ ONIG_EXTERN OnigEncodingType OnigEncodingGB18030;
         (enc)->is_allowed_reverse_match(s,end)\r
 #define ONIGENC_LEFT_ADJUST_CHAR_HEAD(enc,start,s) \\r
         (enc)->left_adjust_char_head(start, s)\r
+#define ONIGENC_IS_VALID_MBC_STRING(enc,s,end) \\r
+        (enc)->is_valid_mbc_string(s,end)\r
 #define ONIGENC_APPLY_ALL_CASE_FOLD(enc,case_fold_flag,f,arg) \\r
         (enc)->apply_all_case_fold(case_fold_flag,f,arg)\r
 #define ONIGENC_GET_CASE_FOLD_CODES_BY_STR(enc,case_fold_flag,p,end,acs) \\r
@@ -340,6 +322,8 @@ OnigUChar* onigenc_step_back P_((OnigEncoding enc, const OnigUChar* start, const
 ONIG_EXTERN\r
 int onigenc_init P_((void));\r
 ONIG_EXTERN\r
+int onig_initialize_encoding P_((OnigEncoding enc));\r
+ONIG_EXTERN\r
 int onigenc_set_default_encoding P_((OnigEncoding enc));\r
 ONIG_EXTERN\r
 OnigEncoding onigenc_get_default_encoding P_((void));\r
@@ -359,13 +343,17 @@ ONIG_EXTERN
 int onigenc_strlen_null P_((OnigEncoding enc, const OnigUChar* p));\r
 ONIG_EXTERN\r
 int onigenc_str_bytelen_null P_((OnigEncoding enc, const OnigUChar* p));\r
-\r
+ONIG_EXTERN\r
+int onigenc_is_valid_mbc_string P_((OnigEncoding enc, const OnigUChar* s, const OnigUChar* end));\r
+ONIG_EXTERN\r
+OnigUChar* onigenc_strdup P_((OnigEncoding enc, const OnigUChar* s, const OnigUChar* end));\r
 \r
 \r
 /* PART: regular expression */\r
 \r
 /* config parameters */\r
 #define ONIG_NREGION                          10\r
+#define ONIG_MAX_CAPTURE_NUM          2147483647  /* 2**31 - 1 */\r
 #define ONIG_MAX_BACKREF_NUM                1000\r
 #define ONIG_MAX_REPEAT_NUM               100000\r
 #define ONIG_MAX_MULTI_BYTE_RANGES_NUM     10000\r
@@ -378,6 +366,7 @@ typedef unsigned int        OnigOptionType;
 \r
 /* options */\r
 #define ONIG_OPTION_NONE                 0U\r
+/* options (compile time) */\r
 #define ONIG_OPTION_IGNORECASE           1U\r
 #define ONIG_OPTION_EXTEND               (ONIG_OPTION_IGNORECASE         << 1)\r
 #define ONIG_OPTION_MULTILINE            (ONIG_OPTION_EXTEND             << 1)\r
@@ -388,10 +377,18 @@ typedef unsigned int        OnigOptionType;
 #define ONIG_OPTION_DONT_CAPTURE_GROUP   (ONIG_OPTION_NEGATE_SINGLELINE  << 1)\r
 #define ONIG_OPTION_CAPTURE_GROUP        (ONIG_OPTION_DONT_CAPTURE_GROUP << 1)\r
 /* options (search time) */\r
-#define ONIG_OPTION_NOTBOL               (ONIG_OPTION_CAPTURE_GROUP << 1)\r
-#define ONIG_OPTION_NOTEOL               (ONIG_OPTION_NOTBOL << 1)\r
-#define ONIG_OPTION_POSIX_REGION         (ONIG_OPTION_NOTEOL << 1)\r
-#define ONIG_OPTION_MAXBIT               ONIG_OPTION_POSIX_REGION  /* limit */\r
+#define ONIG_OPTION_NOTBOL                    (ONIG_OPTION_CAPTURE_GROUP << 1)\r
+#define ONIG_OPTION_NOTEOL                    (ONIG_OPTION_NOTBOL << 1)\r
+#define ONIG_OPTION_POSIX_REGION              (ONIG_OPTION_NOTEOL << 1)\r
+#define ONIG_OPTION_CHECK_VALIDITY_OF_STRING  (ONIG_OPTION_POSIX_REGION << 1)\r
+/* #define ONIG_OPTION_CRLF_AS_LINE_SEPARATOR    (ONIG_OPTION_CHECK_VALIDITY_OF_STRING << 1) */\r
+/* options (compile time) */\r
+#define ONIG_OPTION_WORD_IS_ASCII        (ONIG_OPTION_CHECK_VALIDITY_OF_STRING << 4)\r
+#define ONIG_OPTION_DIGIT_IS_ASCII       (ONIG_OPTION_WORD_IS_ASCII << 1)\r
+#define ONIG_OPTION_SPACE_IS_ASCII       (ONIG_OPTION_DIGIT_IS_ASCII << 1)\r
+#define ONIG_OPTION_POSIX_IS_ASCII       (ONIG_OPTION_SPACE_IS_ASCII << 1)\r
+\r
+#define ONIG_OPTION_MAXBIT               ONIG_OPTION_POSIX_IS_ASCII  /* limit */\r
 \r
 #define ONIG_OPTION_ON(options,regopt)      ((options) |= (regopt))\r
 #define ONIG_OPTION_OFF(options,regopt)     ((options) &= ~(regopt))\r
@@ -416,6 +413,7 @@ ONIG_EXTERN OnigSyntaxType OnigSyntaxJava;
 ONIG_EXTERN OnigSyntaxType OnigSyntaxPerl;\r
 ONIG_EXTERN OnigSyntaxType OnigSyntaxPerl_NG;\r
 ONIG_EXTERN OnigSyntaxType OnigSyntaxRuby;\r
+ONIG_EXTERN OnigSyntaxType OnigSyntaxOniguruma;\r
 \r
 /* predefined syntaxes (see regsyntax.c) */\r
 #define ONIG_SYNTAX_ASIS               (&OnigSyntaxASIS)\r
@@ -428,6 +426,7 @@ ONIG_EXTERN OnigSyntaxType OnigSyntaxRuby;
 #define ONIG_SYNTAX_PERL               (&OnigSyntaxPerl)\r
 #define ONIG_SYNTAX_PERL_NG            (&OnigSyntaxPerl_NG)\r
 #define ONIG_SYNTAX_RUBY               (&OnigSyntaxRuby)\r
+#define ONIG_SYNTAX_ONIGURUMA          (&OnigSyntaxOniguruma)\r
 \r
 /* default syntax */\r
 ONIG_EXTERN OnigSyntaxType*   OnigDefaultSyntax;\r
@@ -465,6 +464,7 @@ ONIG_EXTERN OnigSyntaxType*   OnigDefaultSyntax;
 #define ONIG_SYN_OP_ESC_OCTAL3                  (1U<<28)  /* \OOO */\r
 #define ONIG_SYN_OP_ESC_X_HEX2                  (1U<<29)  /* \xHH */\r
 #define ONIG_SYN_OP_ESC_X_BRACE_HEX8            (1U<<30)  /* \x{7HHHHHHH} */\r
+#define ONIG_SYN_OP_ESC_O_BRACE_OCTAL           (1U<<31)  /* \o{1OOOOOOOOOO} */\r
 \r
 #define ONIG_SYN_OP2_ESC_CAPITAL_Q_QUOTE        (1U<<0)  /* \Q...\E */\r
 #define ONIG_SYN_OP2_QMARK_GROUP_EFFECT         (1U<<1)  /* (?...) */\r
@@ -487,6 +487,15 @@ ONIG_EXTERN OnigSyntaxType*   OnigDefaultSyntax;
 /* #define ONIG_SYN_OP2_CHAR_PROPERTY_PREFIX_IS (1U<<18) */\r
 #define ONIG_SYN_OP2_ESC_H_XDIGIT               (1U<<19) /* \h, \H */\r
 #define ONIG_SYN_OP2_INEFFECTIVE_ESCAPE         (1U<<20) /* \ */\r
+#define ONIG_SYN_OP2_QMARK_LPAREN_IF_ELSE       (1U<<21) /* (?(n)) (?(...)...|...) */\r
+#define ONIG_SYN_OP2_ESC_CAPITAL_K_KEEP         (1U<<22) /* \K */\r
+#define ONIG_SYN_OP2_ESC_CAPITAL_R_GENERAL_NEWLINE (1U<<23) /* \R \r\n else [\x0a-\x0d] */\r
+#define ONIG_SYN_OP2_ESC_CAPITAL_N_O_SUPER_DOT  (1U<<24) /* \N (?-m:.), \O (?m:.) */\r
+#define ONIG_SYN_OP2_QMARK_TILDE_ABSENT_GROUP   (1U<<25) /* (?~...) */\r
+#define ONIG_SYN_OP2_ESC_X_Y_GRAPHEME_CLUSTER   (1U<<26) /* \X \y \Y */\r
+#define ONIG_SYN_OP2_QMARK_PERL_SUBEXP_CALL     (1U<<27) /* (?R), (?&name)... */\r
+#define ONIG_SYN_OP2_QMARK_BRACE_CALLOUT_CONTENTS (1U<<28) /* (?{...}) (?{{...}}) */\r
+#define ONIG_SYN_OP2_ASTERISK_CALLOUT_NAME      (1U<<29) /* (*name) (*name{a,..}) */\r
 \r
 /* syntax (behavior) */\r
 #define ONIG_SYN_CONTEXT_INDEP_ANCHORS           (1U<<31) /* not implemented */\r
@@ -526,6 +535,7 @@ ONIG_EXTERN OnigSyntaxType*   OnigDefaultSyntax;
 #define ONIG_NORMAL                                            0\r
 #define ONIG_MISMATCH                                         -1\r
 #define ONIG_NO_SUPPORT_CONFIG                                -2\r
+#define ONIG_ABORT                                            -3\r
 \r
 /* internal error */\r
 #define ONIGERR_MEMORY                                         -5\r
@@ -535,10 +545,13 @@ ONIG_EXTERN OnigSyntaxType*   OnigDefaultSyntax;
 #define ONIGERR_UNDEFINED_BYTECODE                            -13\r
 #define ONIGERR_UNEXPECTED_BYTECODE                           -14\r
 #define ONIGERR_MATCH_STACK_LIMIT_OVER                        -15\r
+#define ONIGERR_PARSE_DEPTH_LIMIT_OVER                        -16\r
+#define ONIGERR_RETRY_LIMIT_IN_MATCH_OVER                     -17\r
 #define ONIGERR_DEFAULT_ENCODING_IS_NOT_SETTED                -21\r
 #define ONIGERR_SPECIFIED_ENCODING_CANT_CONVERT_TO_WIDE_CHAR  -22\r
+#define ONIGERR_FAIL_TO_INITIALIZE                            -23\r
 /* general error */\r
-#define ONIGERR_INVALID_ARGUMENT                              -30 \r
+#define ONIGERR_INVALID_ARGUMENT                              -30\r
 /* syntax error */\r
 #define ONIGERR_END_PATTERN_AT_LEFT_BRACE                    -100\r
 #define ONIGERR_END_PATTERN_AT_LEFT_BRACKET                  -101\r
@@ -573,6 +586,7 @@ ONIG_EXTERN OnigSyntaxType*   OnigDefaultSyntax;
 #define ONIGERR_TOO_BIG_BACKREF_NUMBER                       -207\r
 #define ONIGERR_INVALID_BACKREF                              -208\r
 #define ONIGERR_NUMBERED_BACKREF_OR_CALL_NOT_ALLOWED         -209\r
+#define ONIGERR_TOO_MANY_CAPTURES                            -210\r
 #define ONIGERR_TOO_LONG_WIDE_CHAR_VALUE                     -212\r
 #define ONIGERR_EMPTY_GROUP_NAME                             -214\r
 #define ONIGERR_INVALID_GROUP_NAME                           -215\r
@@ -584,17 +598,29 @@ ONIG_EXTERN OnigSyntaxType*   OnigDefaultSyntax;
 #define ONIGERR_NEVER_ENDING_RECURSION                       -221\r
 #define ONIGERR_GROUP_NUMBER_OVER_FOR_CAPTURE_HISTORY        -222\r
 #define ONIGERR_INVALID_CHAR_PROPERTY_NAME                   -223\r
+#define ONIGERR_INVALID_IF_ELSE_SYNTAX                       -224\r
+#define ONIGERR_INVALID_ABSENT_GROUP_PATTERN                 -225\r
+#define ONIGERR_INVALID_ABSENT_GROUP_GENERATOR_PATTERN       -226\r
+#define ONIGERR_INVALID_CALLOUT_PATTERN                      -227\r
+#define ONIGERR_INVALID_CALLOUT_NAME                         -228\r
+#define ONIGERR_UNDEFINED_CALLOUT_NAME                       -229\r
+#define ONIGERR_INVALID_CALLOUT_BODY                         -230\r
+#define ONIGERR_INVALID_CALLOUT_TAG_NAME                     -231\r
+#define ONIGERR_INVALID_CALLOUT_ARG                          -232\r
 #define ONIGERR_INVALID_CODE_POINT_VALUE                     -400\r
 #define ONIGERR_INVALID_WIDE_CHAR_VALUE                      -400\r
 #define ONIGERR_TOO_BIG_WIDE_CHAR_VALUE                      -401\r
 #define ONIGERR_NOT_SUPPORTED_ENCODING_COMBINATION           -402\r
 #define ONIGERR_INVALID_COMBINATION_OF_OPTIONS               -403\r
+#define ONIGERR_TOO_MANY_USER_DEFINED_OBJECTS                -404\r
+#define ONIGERR_TOO_LONG_PROPERTY_NAME                       -405\r
+#define ONIGERR_LIBRARY_IS_NOT_INITIALIZED                   -500\r
 \r
 /* errors related to thread */\r
-#define ONIGERR_OVER_THREAD_PASS_LIMIT_COUNT                -1001\r
+/* #define ONIGERR_OVER_THREAD_PASS_LIMIT_COUNT                -1001 */\r
 \r
 \r
-/* must be smaller than BIT_STATUS_BITS_NUM (unsigned int * 8) */\r
+/* must be smaller than MEM_STATUS_BITS_NUM (unsigned int * 8) */\r
 #define ONIG_MAX_CAPTURE_HISTORY_GROUP   31\r
 #define ONIG_IS_CAPTURE_HISTORY_GROUP(r, i) \\r
   ((i) <= ONIG_MAX_CAPTURE_HISTORY_GROUP && (r)->list && (r)->list[i])\r
@@ -646,59 +672,8 @@ extern void onig_null_warn P_((const char* s));
 \r
 #define ONIG_CHAR_TABLE_SIZE   256\r
 \r
-/* regex_t state */\r
-#define ONIG_STATE_NORMAL              0\r
-#define ONIG_STATE_SEARCHING           1\r
-#define ONIG_STATE_COMPILING          -1\r
-#define ONIG_STATE_MODIFY             -2\r
-\r
-#define ONIG_STATE(reg) \\r
-  ((reg)->state > 0 ? ONIG_STATE_SEARCHING : (reg)->state)\r
-\r
-typedef struct re_pattern_buffer {\r
-  /* common members of BBuf(bytes-buffer) */\r
-  unsigned char* p;         /* compiled pattern */\r
-  unsigned int used;        /* used space for p */\r
-  unsigned int alloc;       /* allocated space for p */\r
-\r
-  int state;                     /* normal, searching, compiling */\r
-  int num_mem;                   /* used memory(...) num counted from 1 */\r
-  int num_repeat;                /* OP_REPEAT/OP_REPEAT_NG id-counter */\r
-  int num_null_check;            /* OP_NULL_CHECK_START/END id counter */\r
-  int num_comb_exp_check;        /* combination explosion check */\r
-  int num_call;                  /* number of subexp call */\r
-  unsigned int capture_history;  /* (?@...) flag (1-31) */\r
-  unsigned int bt_mem_start;     /* need backtrack flag */\r
-  unsigned int bt_mem_end;       /* need backtrack flag */\r
-  int stack_pop_level;\r
-  int repeat_range_alloc;\r
-  OnigRepeatRange* repeat_range;\r
-\r
-  OnigEncoding      enc;\r
-  OnigOptionType    options;\r
-  OnigSyntaxType*   syntax;\r
-  OnigCaseFoldType  case_fold_flag;\r
-  void*             name_table;\r
-\r
-  /* optimization info (string search, char-map and anchors) */\r
-  int            optimize;          /* optimize flag */\r
-  int            threshold_len;     /* search str-length for apply optimize */\r
-  int            anchor;            /* BEGIN_BUF, BEGIN_POS, (SEMI_)END_BUF */\r
-  OnigDistance   anchor_dmin;       /* (SEMI_)END_BUF anchor distance */\r
-  OnigDistance   anchor_dmax;       /* (SEMI_)END_BUF anchor distance */\r
-  int            sub_anchor;        /* start-anchor for exact or map */\r
-  unsigned char *exact;\r
-  unsigned char *exact_end;\r
-  unsigned char  map[ONIG_CHAR_TABLE_SIZE]; /* used as BM skip or char-map */\r
-  int           *int_map;                   /* BM skip for exact_len > 255 */\r
-  int           *int_map_backward;          /* BM skip for backward search */\r
-  OnigDistance   dmin;                      /* min-distance of exact or map */\r
-  OnigDistance   dmax;                      /* max-distance of exact or map */\r
-\r
-  /* regex_t link chain */\r
-  struct re_pattern_buffer* chain;  /* escape compile-conflict */\r
-} OnigRegexType;\r
-\r
+struct re_pattern_buffer;\r
+typedef struct re_pattern_buffer OnigRegexType;\r
 typedef OnigRegexType*  OnigRegex;\r
 \r
 #ifndef ONIG_ESCAPE_REGEX_T_COLLISION\r
@@ -715,7 +690,75 @@ typedef struct {
   OnigCaseFoldType   case_fold_flag;\r
 } OnigCompileInfo;\r
 \r
+\r
+/* types for callout */\r
+typedef enum {\r
+  ONIG_CALLOUT_IN_PROGRESS   = 1, /* 1<<0 */\r
+  ONIG_CALLOUT_IN_RETRACTION = 2  /* 1<<1 */\r
+} OnigCalloutIn;\r
+\r
+#define ONIG_CALLOUT_IN_BOTH  (ONIG_CALLOUT_IN_PROGRESS | ONIG_CALLOUT_IN_RETRACTION)\r
+\r
+typedef enum {\r
+  ONIG_CALLOUT_OF_CONTENTS = 0,\r
+  ONIG_CALLOUT_OF_NAME     = 1\r
+} OnigCalloutOf;\r
+\r
+typedef enum {\r
+  ONIG_CALLOUT_TYPE_SINGLE              = 0,\r
+  ONIG_CALLOUT_TYPE_START_CALL          = 1,\r
+  ONIG_CALLOUT_TYPE_BOTH_CALL           = 2,\r
+  ONIG_CALLOUT_TYPE_START_MARK_END_CALL = 3,\r
+} OnigCalloutType;\r
+\r
+\r
+#define ONIG_NON_NAME_ID        -1\r
+#define ONIG_NON_CALLOUT_NUM     0\r
+\r
+#define ONIG_CALLOUT_MAX_ARGS_NUM     4\r
+#define ONIG_CALLOUT_DATA_SLOT_NUM    5\r
+\r
+struct OnigCalloutArgsStruct;\r
+typedef struct OnigCalloutArgsStruct OnigCalloutArgs;\r
+\r
+typedef int (*OnigCalloutFunc)(OnigCalloutArgs* args, void* user_data);\r
+\r
+/* callout function return values (less than -1: error code) */\r
+typedef enum {\r
+  ONIG_CALLOUT_FAIL     =  1,\r
+  ONIG_CALLOUT_SUCCESS  =  0\r
+} OnigCalloutResult;\r
+\r
+typedef enum {\r
+  ONIG_TYPE_VOID     = 0,\r
+  ONIG_TYPE_LONG     = 1<<0,\r
+  ONIG_TYPE_CHAR     = 1<<1,\r
+  ONIG_TYPE_STRING   = 1<<2,\r
+  ONIG_TYPE_POINTER  = 1<<3,\r
+  ONIG_TYPE_TAG      = 1<<4,\r
+} OnigType;\r
+\r
+typedef union {\r
+  long l;\r
+  OnigCodePoint c;\r
+  struct {\r
+    OnigUChar* start;\r
+    OnigUChar* end;\r
+  } s;\r
+  void* p;\r
+  int tag;  /* tag -> callout_num */\r
+} OnigValue;\r
+\r
+\r
+struct OnigMatchParamStruct;\r
+typedef struct OnigMatchParamStruct OnigMatchParam;\r
+\r
+\r
 /* Oniguruma Native API */\r
+\r
+ONIG_EXTERN\r
+int onig_initialize P_((OnigEncoding encodings[], int number_of_encodings));\r
+/* onig_init(): deprecated function. Use onig_initialize(). */\r
 ONIG_EXTERN\r
 int onig_init P_((void));\r
 ONIG_EXTERN\r
@@ -727,7 +770,7 @@ void onig_set_verb_warn_func P_((OnigWarnFunc f));
 ONIG_EXTERN\r
 int onig_new P_((OnigRegex*, const OnigUChar* pattern, const OnigUChar* pattern_end, OnigOptionType option, OnigEncoding enc, OnigSyntaxType* syntax, OnigErrorInfo* einfo));\r
 ONIG_EXTERN\r
-int  onig_reg_init P_((regex_t* reg, OnigOptionType option, OnigCaseFoldType case_fold_flag, OnigEncoding enc, OnigSyntaxType* syntax));\r
+int  onig_reg_init P_((OnigRegex reg, OnigOptionType option, OnigCaseFoldType case_fold_flag, OnigEncoding enc, OnigSyntaxType* syntax));\r
 int onig_new_without_alloc P_((OnigRegex, const OnigUChar* pattern, const OnigUChar* pattern_end, OnigOptionType option, OnigEncoding enc, OnigSyntaxType* syntax, OnigErrorInfo* einfo));\r
 ONIG_EXTERN\r
 int onig_new_deluxe P_((OnigRegex* reg, const OnigUChar* pattern, const OnigUChar* pattern_end, OnigCompileInfo* ci, OnigErrorInfo* einfo));\r
@@ -736,14 +779,16 @@ void onig_free P_((OnigRegex));
 ONIG_EXTERN\r
 void onig_free_body P_((OnigRegex));\r
 ONIG_EXTERN\r
-int onig_recompile P_((OnigRegex, const OnigUChar* pattern, const OnigUChar* pattern_end, OnigOptionType option, OnigEncoding enc, OnigSyntaxType* syntax, OnigErrorInfo* einfo));\r
-ONIG_EXTERN\r
-int onig_recompile_deluxe P_((OnigRegex reg, const OnigUChar* pattern, const OnigUChar* pattern_end, OnigCompileInfo* ci, OnigErrorInfo* einfo));\r
+int onig_scan(OnigRegex reg, const OnigUChar* str, const OnigUChar* end, OnigRegion* region, OnigOptionType option, int (*scan_callback)(int, int, OnigRegion*, void*), void* callback_arg);\r
 ONIG_EXTERN\r
 int onig_search P_((OnigRegex, const OnigUChar* str, const OnigUChar* end, const OnigUChar* start, const OnigUChar* range, OnigRegion* region, OnigOptionType option));\r
 ONIG_EXTERN\r
+int onig_search_with_param P_((OnigRegex, const OnigUChar* str, const OnigUChar* end, const OnigUChar* start, const OnigUChar* range, OnigRegion* region, OnigOptionType option, OnigMatchParam* mp));\r
+ONIG_EXTERN\r
 int onig_match P_((OnigRegex, const OnigUChar* str, const OnigUChar* end, const OnigUChar* at, OnigRegion* region, OnigOptionType option));\r
 ONIG_EXTERN\r
+int onig_match_with_param P_((OnigRegex, const OnigUChar* str, const OnigUChar* end, const OnigUChar* at, OnigRegion* region, OnigOptionType option, OnigMatchParam* mp));\r
+ONIG_EXTERN\r
 OnigRegion* onig_region_new P_((void));\r
 ONIG_EXTERN\r
 void onig_region_init P_((OnigRegion* region));\r
@@ -816,12 +861,141 @@ unsigned int onig_get_match_stack_limit_size P_((void));
 ONIG_EXTERN\r
 int onig_set_match_stack_limit_size P_((unsigned int size));\r
 ONIG_EXTERN\r
+unsigned long onig_get_retry_limit_in_match P_((void));\r
+ONIG_EXTERN\r
+int onig_set_retry_limit_in_match P_((unsigned long n));\r
+ONIG_EXTERN\r
+unsigned int onig_get_parse_depth_limit P_((void));\r
+ONIG_EXTERN\r
+int onig_set_capture_num_limit P_((int num));\r
+ONIG_EXTERN\r
+int onig_set_parse_depth_limit P_((unsigned int depth));\r
+ONIG_EXTERN\r
+int onig_unicode_define_user_property P_((const char* name, OnigCodePoint* ranges));\r
+ONIG_EXTERN\r
 int onig_end P_((void));\r
 ONIG_EXTERN\r
 const char* onig_version P_((void));\r
 ONIG_EXTERN\r
 const char* onig_copyright P_((void));\r
 \r
+/* for OnigMatchParam */\r
+ONIG_EXTERN\r
+OnigMatchParam* onig_new_match_param P_((void));\r
+ONIG_EXTERN\r
+void onig_free_match_param P_((OnigMatchParam* p));\r
+ONIG_EXTERN\r
+void onig_free_match_param_content P_((OnigMatchParam* p));\r
+ONIG_EXTERN\r
+int onig_initialize_match_param P_((OnigMatchParam* mp));\r
+ONIG_EXTERN\r
+int onig_set_match_stack_limit_size_of_match_param P_((OnigMatchParam* param, unsigned int limit));\r
+ONIG_EXTERN\r
+int onig_set_retry_limit_in_match_of_match_param P_((OnigMatchParam* param, unsigned long limit));\r
+ONIG_EXTERN\r
+int onig_set_progress_callout_of_match_param P_((OnigMatchParam* param, OnigCalloutFunc f));\r
+ONIG_EXTERN\r
+int onig_set_retraction_callout_of_match_param P_((OnigMatchParam* param, OnigCalloutFunc f));\r
+ONIG_EXTERN\r
+int onig_set_callout_user_data_of_match_param P_((OnigMatchParam* param, void* user_data));\r
+\r
+/* for callout functions */\r
+ONIG_EXTERN\r
+OnigCalloutFunc onig_get_progress_callout P_((void));\r
+ONIG_EXTERN\r
+int onig_set_progress_callout P_((OnigCalloutFunc f));\r
+ONIG_EXTERN\r
+OnigCalloutFunc onig_get_retraction_callout P_((void));\r
+ONIG_EXTERN\r
+int onig_set_retraction_callout P_((OnigCalloutFunc f));\r
+ONIG_EXTERN\r
+int onig_set_callout_of_name P_((OnigEncoding enc, OnigCalloutType type, OnigUChar* name, OnigUChar* name_end, int callout_in, OnigCalloutFunc callout, OnigCalloutFunc end_callout, int arg_num, unsigned int arg_types[], int optional_arg_num, OnigValue opt_defaults[]));\r
+ONIG_EXTERN\r
+OnigUChar* onig_get_callout_name_by_name_id P_((int id));\r
+ONIG_EXTERN\r
+int onig_get_callout_num_by_tag P_((OnigRegex reg, const OnigUChar* tag, const OnigUChar* tag_end));\r
+ONIG_EXTERN\r
+int onig_get_callout_data_by_tag P_((OnigRegex reg, OnigMatchParam* mp, const OnigUChar* tag, const OnigUChar* tag_end, int slot, OnigType* type, OnigValue* val));\r
+ONIG_EXTERN\r
+int onig_set_callout_data_by_tag P_((OnigRegex reg, OnigMatchParam* mp, const OnigUChar* tag, const OnigUChar* tag_end, int slot, OnigType type, OnigValue* val));\r
+\r
+/* used in callout functions */\r
+ONIG_EXTERN\r
+int onig_get_callout_num_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+OnigCalloutIn onig_get_callout_in_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+int onig_get_name_id_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+const OnigUChar* onig_get_contents_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+const OnigUChar* onig_get_contents_end_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+int onig_get_args_num_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+int onig_get_passed_args_num_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+int onig_get_arg_by_callout_args P_((OnigCalloutArgs* args, int index, OnigType* type, OnigValue* val));\r
+ONIG_EXTERN\r
+const OnigUChar* onig_get_string_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+const OnigUChar* onig_get_string_end_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+const OnigUChar* onig_get_start_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+const OnigUChar* onig_get_right_range_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+const OnigUChar* onig_get_current_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+OnigRegex onig_get_regex_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+unsigned long onig_get_retry_counter_by_callout_args P_((OnigCalloutArgs* args));\r
+ONIG_EXTERN\r
+int onig_callout_tag_is_exist_at_callout_num P_((OnigRegex reg, int callout_num));\r
+ONIG_EXTERN\r
+const OnigUChar* onig_get_callout_tag_start P_((OnigRegex reg, int callout_num));\r
+ONIG_EXTERN\r
+const OnigUChar* onig_get_callout_tag_end P_((OnigRegex reg, int callout_num));\r
+ONIG_EXTERN\r
+int onig_get_callout_data_dont_clear_old P_((OnigRegex reg, OnigMatchParam* mp, int callout_num, int slot, OnigType* type, OnigValue* val));\r
+ONIG_EXTERN\r
+int onig_get_callout_data_by_callout_args_self_dont_clear_old P_((OnigCalloutArgs* args, int slot, OnigType* type, OnigValue* val));\r
+ONIG_EXTERN\r
+int onig_get_callout_data P_((OnigRegex reg, OnigMatchParam* mp, int callout_num, int slot, OnigType* type, OnigValue* val));\r
+ONIG_EXTERN\r
+int onig_get_callout_data_by_callout_args P_((OnigCalloutArgs* args, int callout_num, int slot, OnigType* type, OnigValue* val));\r
+ONIG_EXTERN\r
+int onig_get_callout_data_by_callout_args_self P_((OnigCalloutArgs* args, int slot, OnigType* type, OnigValue* val));\r
+ONIG_EXTERN\r
+int onig_set_callout_data P_((OnigRegex reg, OnigMatchParam* mp, int callout_num, int slot, OnigType type, OnigValue* val));\r
+ONIG_EXTERN\r
+int onig_set_callout_data_by_callout_args P_((OnigCalloutArgs* args, int callout_num, int slot, OnigType type, OnigValue* val));\r
+ONIG_EXTERN\r
+int onig_set_callout_data_by_callout_args_self P_((OnigCalloutArgs* args, int slot, OnigType type, OnigValue* val));\r
+ONIG_EXTERN\r
+int onig_get_capture_range_in_callout P_((OnigCalloutArgs* args, int mem_num, int* begin, int* end));\r
+ONIG_EXTERN\r
+int onig_get_used_stack_size_in_callout P_((OnigCalloutArgs* args, int* used_num, int* used_bytes));\r
+\r
+/* builtin callout functions */\r
+ONIG_EXTERN\r
+int onig_builtin_fail P_((OnigCalloutArgs* args, void* user_data));\r
+ONIG_EXTERN\r
+int onig_builtin_mismatch P_((OnigCalloutArgs* args, void* user_data));\r
+ONIG_EXTERN\r
+int onig_builtin_error P_((OnigCalloutArgs* args, void* user_data));\r
+ONIG_EXTERN\r
+int onig_builtin_count P_((OnigCalloutArgs* args, void* user_data));\r
+ONIG_EXTERN\r
+int onig_builtin_total_count P_((OnigCalloutArgs* args, void* user_data));\r
+ONIG_EXTERN\r
+int onig_builtin_max P_((OnigCalloutArgs* args, void* user_data));\r
+ONIG_EXTERN\r
+int onig_builtin_cmp P_((OnigCalloutArgs* args, void* user_data));\r
+\r
+ONIG_EXTERN\r
+int onig_setup_builtin_monitors_by_ascii_encoded_name P_((void* fp));\r
+\r
 #ifdef __cplusplus\r
 }\r
 #endif\r