Changeset 1924

Timestamp:

04/03/07 23:30:21 (1 year ago)

Author:

karpet

Message:

global init/cleanup functions to help reduce duplication

Files:

• libswish3/trunk/src/libswish3/Makefile.am (modified) (1 diff)
• libswish3/trunk/src/libswish3/config.c (modified) (3 diffs)
• libswish3/trunk/src/libswish3/libswish3.h (modified) (3 diffs)
• libswish3/trunk/src/libswish3/mem.c (modified) (1 diff)
• libswish3/trunk/src/libswish3/parser.c (modified) (7 diffs)
• libswish3/trunk/src/libswish3/swish.c (added)
• libswish3/trunk/src/libswish3/words.c (modified) (8 diffs)
• libswish3/trunk/src/swish_lint.c (modified) (11 diffs)
• libswish3/trunk/src/swish_words.c (modified) (3 diffs)

libswish3/trunk/src/libswish3/Makefile.am

@@ -24 +24 @@
-                        times.c \
-                        words.c \
+                        swish.c \
-                        $(myheaders) 
-

libswish3/trunk/src/libswish3/config.c

@@ -58 +58 @@
-static void     add_multi_node_to_cv(xmlNode * node, swish_ConfigValue * cv);
-
-static int meta_abbrev_len = 625;   /* 26 * 26 - 1 */
-static char * meta_abbrev[] = {
-"Aa", "Ab", "Ac", "Ad", "Ae", "Af", "Ag", "Ah", "Ai", "Aj", "Ak", "Al", "Am", 
-"An", "Ao", "Ap", "Aq", "Ar", "As", "At", "Au", "Av", "Aw", "Ax", "Ay", "Az", 
-"Ba", "Bb", "Bc", "Bd", "Be", "Bf", "Bg", "Bh", "Bi", "Bj", "Bk", "Bl", "Bm", 
-"Bn", "Bo", "Bp", "Bq", "Br", "Bs", "Bt", "Bu", "Bv", "Bw", "Bx", "By", "Bz", 
-"Ca", "Cb", "Cc", "Cd", "Ce", "Cf", "Cg", "Ch", "Ci", "Cj", "Ck", "Cl", "Cm", 
-"Cn", "Co", "Cp", "Cq", "Cr", "Cs", "Ct", "Cu", "Cv", "Cw", "Cx", "Cy", "Cz", 
-"Da", "Db", "Dc", "Dd", "De", "Df", "Dg", "Dh", "Di", "Dj", "Dk", "Dl", "Dm", 
-"Dn", "Do", "Dp", "Dq", "Dr", "Ds", "Dt", "Du", "Dv", "Dw", "Dx", "Dy", "Dz", 
-"Ea", "Eb", "Ec", "Ed", "Ee", "Ef", "Eg", "Eh", "Ei", "Ej", "Ek", "El", "Em", 
-"En", "Eo", "Ep", "Eq", "Er", "Es", "Et", "Eu", "Ev", "Ew", "Ex", "Ey", "Ez", 
-"Fa", "Fb", "Fc", "Fd", "Fe", "Ff", "Fg", "Fh", "Fi", "Fj", "Fk", "Fl", "Fm", 
-"Fn", "Fo", "Fp", "Fq", "Fr", "Fs", "Ft", "Fu", "Fv", "Fw", "Fx", "Fy", "Fz", 
-"Ga", "Gb", "Gc", "Gd", "Ge", "Gf", "Gg", "Gh", "Gi", "Gj", "Gk", "Gl", "Gm", 
-"Gn", "Go", "Gp", "Gq", "Gr", "Gs", "Gt", "Gu", "Gv", "Gw", "Gx", "Gy", "Gz", 
-"Ha", "Hb", "Hc", "Hd", "He", "Hf", "Hg", "Hh", "Hi", "Hj", "Hk", "Hl", "Hm", 
-"Hn", "Ho", "Hp", "Hq", "Hr", "Hs", "Ht", "Hu", "Hv", "Hw", "Hx", "Hy", "Hz", 
-"Ia", "Ib", "Ic", "Id", "Ie", "If", "Ig", "Ih", "Ii", "Ij", "Ik", "Il", "Im", 
-"In", "Io", "Ip", "Iq", "Ir", "Is", "It", "Iu", "Iv", "Iw", "Ix", "Iy", "Iz", 
-"Ja", "Jb", "Jc", "Jd", "Je", "Jf", "Jg", "Jh", "Ji", "Jj", "Jk", "Jl", "Jm", 
-"Jn", "Jo", "Jp", "Jq", "Jr", "Js", "Jt", "Ju", "Jv", "Jw", "Jx", "Jy", "Jz", 
-"Ka", "Kb", "Kc", "Kd", "Ke", "Kf", "Kg", "Kh", "Ki", "Kj", "Kk", "Kl", "Km", 
-"Kn", "Ko", "Kp", "Kq", "Kr", "Ks", "Kt", "Ku", "Kv", "Kw", "Kx", "Ky", "Kz", 
-"La", "Lb", "Lc", "Ld", "Le", "Lf", "Lg", "Lh", "Li", "Lj", "Lk", "Ll", "Lm", 
-"Ln", "Lo", "Lp", "Lq", "Lr", "Ls", "Lt", "Lu", "Lv", "Lw", "Lx", "Ly", "Lz", 
-"Ma", "Mb", "Mc", "Md", "Me", "Mf", "Mg", "Mh", "Mi", "Mj", "Mk", "Ml", "Mm", 
-"Mn", "Mo", "Mp", "Mq", "Mr", "Ms", "Mt", "Mu", "Mv", "Mw", "Mx", "My", "Mz", 
-"Na", "Nb", "Nc", "Nd", "Ne", "Nf", "Ng", "Nh", "Ni", "Nj", "Nk", "Nl", "Nm", 
-"Nn", "No", "Np", "Nq", "Nr", "Ns", "Nt", "Nu", "Nv", "Nw", "Nx", "Ny", "Nz", 
-"Oa", "Ob", "Oc", "Od", "Oe", "Of", "Og", "Oh", "Oi", "Oj", "Ok", "Ol", "Om", 
-"On", "Oo", "Op", "Oq", "Or", "Os", "Ot", "Ou", "Ov", "Ow", "Ox", "Oy", "Oz", 
-"Pa", "Pb", "Pc", "Pd", "Pe", "Pf", "Pg", "Ph", "Pi", "Pj", "Pk", "Pl", "Pm", 
-"Pn", "Po", "Pp", "Pq", "Pr", "Ps", "Pt", "Pu", "Pv", "Pw", "Px", "Py", "Pz", 
-"Qa", "Qb", "Qc", "Qd", "Qe", "Qf", "Qg", "Qh", "Qi", "Qj", "Qk", "Ql", "Qm", 
-"Qn", "Qo", "Qp", "Qq", "Qr", "Qs", "Qt", "Qu", "Qv", "Qw", "Qx", "Qy", "Qz", 
-"Ra", "Rb", "Rc", "Rd", "Re", "Rf", "Rg", "Rh", "Ri", "Rj", "Rk", "Rl", "Rm", 
-"Rn", "Ro", "Rp", "Rq", "Rr", "Rs", "Rt", "Ru", "Rv", "Rw", "Rx", "Ry", "Rz", 
-"Sa", "Sb", "Sc", "Sd", "Se", "Sf", "Sg", "Sh", "Si", "Sj", "Sk", "Sl", "Sm", 
-"Sn", "So", "Sp", "Sq", "Sr", "Ss", "St", "Su", "Sv", "Sw", "Sx", "Sy", "Sz", 
-"Ta", "Tb", "Tc", "Td", "Te", "Tf", "Tg", "Th", "Ti", "Tj", "Tk", "Tl", "Tm", 
-"Tn", "To", "Tp", "Tq", "Tr", "Ts", "Tt", "Tu", "Tv", "Tw", "Tx", "Ty", "Tz", 
-"Ua", "Ub", "Uc", "Ud", "Ue", "Uf", "Ug", "Uh", "Ui", "Uj", "Uk", "Ul", "Um", 
-"Un", "Uo", "Up", "Uq", "Ur", "Us", "Ut", "Uu", "Uv", "Uw", "Ux", "Uy", "Uz", 
-"Va", "Vb", "Vc", "Vd", "Ve", "Vf", "Vg", "Vh", "Vi", "Vj", "Vk", "Vl", "Vm", 
-"Vn", "Vo", "Vp", "Vq", "Vr", "Vs", "Vt", "Vu", "Vv", "Vw", "Vx", "Vy", "Vz", 
-"Wa", "Wb", "Wc", "Wd", "We", "Wf", "Wg", "Wh", "Wi", "Wj", "Wk", "Wl", "Wm", 
-"Wn", "Wo", "Wp", "Wq", "Wr", "Ws", "Wt", "Wu", "Wv", "Ww", "Wx", "Wy", "Wz", 
-"Xa", "Xb", "Xc", "Xd", "Xe", "Xf", "Xg", "Xh", "Xi", "Xj", "Xk", "Xl", "Xm", 
-"Xn", "Xo", "Xp", "Xq", "Xr", "Xs", "Xt", "Xu", "Xv", "Xw", "Xx", "Xy", "Xz", 
-"Ya", "Yb", "Yc", "Yd", "Ye", "Yf", "Yg", "Yh", "Yi", "Yj", "Yk", "Yl", "Ym", 
-"Yn", "Yo", "Yp", "Yq", "Yr", "Ys", "Yt", "Yu", "Yv", "Yw", "Yx", "Yy", "Yz", 
-"Za", "Zb", "Zc", "Zd", "Ze", "Zf", "Zg", "Zh", "Zi", "Zj", "Zk", "Zl", "Zm", 
-"Zn", "Zo", "Zp", "Zq", "Zr", "Zs", "Zt", "Zu", "Zv", "Zw", "Zx", "Zy", "Zz" 
-};
-
-
-static void
@@ -160 +104 @@
-
-    swish_xfree(config);
-
-
-
-
-
-
-
+
+
+
+
+
-
-swish_Config  *
@@ -176 +118 @@
-    xmlHashTablePtr c, metas, parsers, index, prop, alias, parsewords;
-
-
-    /* init memory */
-    swish_init_memory();
-
-    /* verify locale */
-    swish_verify_utf8_locale();
-
-    /* set global vars */
-    setenv("SWISH_DEBUG", "0", 0);
-    SWISH_DEBUG = strtol(getenv("SWISH_DEBUG"), (char **) NULL, 10);
-
-    if (SWISH_DEBUG)

libswish3/trunk/src/libswish3/libswish3.h

@@ -127 +127 @@
-
-
+/* global init and cleanup functions -- call these in every linking program */
+void        swish_init();
+void        swish_cleanup();
+
-
-/* utils */
@@ -351 +355 @@
-
-/* word functions */
+void                swish_init_words();
-swish_WordList *    swish_init_WordList();
-void                swish_free_WordList(swish_WordList * list);
@@ -360 +365 @@
-                                      int base_word_pos, 
-                                      int offset );
+
+swish_WordList *    swish_tokenize_utf8_string(   
+                                      xmlChar * str, 
+                                      xmlChar * metaname, 
+                                      xmlChar * context,
+                                      int maxwordlen, 
+                                      int minwordlen, 
+                                      int base_word_pos, 
+                                      int offset );
+
+swish_WordList *    swish_tokenize_ascii_string(   
+                                      xmlChar * str, 
+                                      xmlChar * metaname, 
+                                      xmlChar * context,
+                                      int maxwordlen, 
+                                      int minwordlen, 
+                                      int base_word_pos, 
+                                      int offset );
+
+
-size_t              swish_add_to_wordlist(  swish_WordList * list, 
-                                            xmlChar * word,

libswish3/trunk/src/libswish3/mem.c

@@ -37 +37 @@
-{
-    memcount = 0;
-    
-    if (SWISH_DEBUG)
-        return;
-        
-    /* init the global env vars, but don't override if already set */
-    setenv("SWISH_DEBUG", "0", 0);
-    SWISH_DEBUG = strtol(getenv("SWISH_DEBUG"), (char**)NULL, 10);
-}
-

libswish3/trunk/src/libswish3/parser.c

@@ -56 +56 @@
-
-extern int      errno;
-
-
-
-
-
-
-
+
+
-int             SWISH_PARSER_ERROR     = 0;
-int             SWISH_PARSER_WARNING   = 0;
@@ -158 +153 @@
-swish_init_parser()
-{
-
-
-
-
-
-
-
+
-    xmlSubstituteEntitiesDefault(1);    /* resolve text entities */
+    get_env_vars();
-}
-
@@ -1196 +1186 @@
-{
-    /* init the global env vars, but don't override if already set */
-    setenv("SWISH_DEBUG", "0", 0);
-    SWISH_DEBUG = (int)strtol(getenv("SWISH_DEBUG"), (char**)NULL, 10);
-
-    setenv("SWISH_PARSER_ERROR", "0", 0);
@@ -1210 +1198 @@
-    if (SWISH_DEBUG)
-    {
-= 1
-= 1
-= 1
+     = SWISH_DEBUG
+   = SWISH_DEBUG
+     = SWISH_DEBUG
-    }
-}
@@ -1241 +1229 @@
-    min_headers = 2;
-
-    get_env_vars();
-    
-    ln = swish_xmalloc(SWISH_MAXSTRLEN + 1);
-    head_buf = xmlBufferCreateSize((SWISH_MAX_HEADERS * SWISH_MAXSTRLEN) + SWISH_MAX_HEADERS);
@@ -1402 +1388 @@
-
-
-    get_env_vars();
-
-    head = buf_to_head(buf);
-
@@ -1461 +1445 @@
-    double          curTime = swish_time_elapsed();
-    char           *etime;
-
-    get_env_vars();
-
-    swish_ParseData *parse_data    = init_parse_data(config, user_data);

libswish3/trunk/src/libswish3/words.c

@@ -40 +40 @@
-static int      is_ignore_word(wint_t c);
-static int      bytes_in_char(wint_t c);
-
-
-
-
-
-
-
-
-
-
-
+
+
+
+
+
+
+
+
+
-        return;
-        
-
-
-
+
+
-}
-
@@ -233 +230 @@
-
-
-tatic s
-
+
+swish_
-               xmlChar * str,
-               xmlChar * metaname,
@@ -416 +413 @@
-*************************************************/
-
-static int ascii_tables_created = 0;
-static char ascii_word_table[128];
-static char ascii_start_table[128];
@@ -443 +439 @@
-            
-    }
-    ascii_tables_created = 1;
-}
-
@@ -458 +453 @@
-
-
-tatic s
-
+
+swish_
-               xmlChar * str,
-               xmlChar * metaname,
@@ -481 +476 @@
-    if (SWISH_DEBUG > 10)
-        swish_debug_msg("parsing string: '%s' into words", str);
-
-    
-    /* build tables if this is first time through */
-    if (!ascii_tables_created)
-        make_ascii_tables();
-
-
@@ -638 +628 @@
-{
-
-
+
+
+
+
+
-
-    if (swish_is_ascii( str ))
-    {
-        //swish_debug_msg("%s is ascii", str);
-
+swish_
-                                        metaname, 
-                                        context, 
@@ -654 +648 @@
-    {
-        //swish_debug_msg("%s is utf8", str);
-
+swish_
-                                        metaname, 
-                                        context, 

libswish3/trunk/src/swish_lint.c

@@ -42 +42 @@
-int             twords = 0;
-
+extern int SWISH_DEBUG;
+
-static struct option longopts[] =
-{
@@ -47 +49 @@
-    {"debug",  required_argument, 0, 'd'},
-    {"help",   no_argument, 0, 'h'},
-    {"version", no_argument, 0, 'v'},
-    {0, 0, 0, 0}
-};
@@ -59 +60 @@
-void swish_version()
-{
-
+
+
-}
-
@@ -68 +70 @@
-    char * descr = "swish_lint is an example program for using SwishParser\n";
-    printf("swish_lint [opts] [- | file(s)]\n");
-\n --help\n --version
+ [lvl]\n --help
-    printf("\n%s\n", descr);
-    libxml2_version();
@@ -85 +87 @@
-    twords += parse_data->docinfo->nwords;
-
-debug
+SWISH_DEBUG
-    {
-        swish_debug_docinfo(parse_data->docinfo);
@@ -105 +107 @@
-    double          startTime = swish_time_elapsed();
-    
-
-
-
-
-
-
-
-
+
+
+
+
+
-
-    while ((ch = getopt_long(argc, argv, "c:d:f:h", longopts, &option_index)) != -1)
@@ -135 +134 @@
-
-            //printf("optarg = %s\n", optarg);
- = swish_add_config((xmlChar *) optarg, config
+_file = swish_xstrdup( optarg 
-            break;
-            
-        case 'v':
-            libxml2_version();
-            swish_version();
-            break;
-
-
-        case 'd':
@@ -150 +144 @@
-                err(1, "-d option requires a positive integer as argument\n");
-
-
-
-
-
+
-            break;
-
@@ -169 +160 @@
-
-    }
+    
+    config = swish_init_config();
+
+    if (config_file != NULL)
+    {
+        config = swish_add_config(config_file, config);
+    }
-
-    i = optind;
@@ -180 +178 @@
-    }
-    
-debug
+SWISH_DEBUG
-    {
-        swish_debug_config(config);   
@@ -219 +217 @@
-    
-    swish_free_config( config );
-
-
+
+
+
+
+
-
-    return (0);

libswish3/trunk/src/swish_words.c

@@ -70 +70 @@
-    int             max = 255;
-    int             min = 1;
-
+
-    swish_WordList *list;
-
@@ -122 +122 @@
-    }
-
+    swish_init();   /* call after we have set optional debug flag */
+
-    i = optind;
-        
@@ -133 +135 @@
-
-    }
+    
+    swish_cleanup();
-
-    return (0);