cherry pick from local- branch
[SXSI/xpathcomp.git] / OCamlDriver.cpp
1 /**************************************
2  * OCamlDriver.cpp
3  * -------------------
4  * An Ocaml Driver which calls the C++ methods and
5  * adds a C wrapper interface with OCaml code.
6  * 
7  * Author: Kim Nguyen
8  * Date: 04/11/08
9  */
10
11 /***
12  *  Conventions:
13  *  functions never doing any allocation (non caml_alloc*, caml_copy_string,...)
14  *  have NOALLOC in the comment and their external declaration can have "noalloc"
15  */
16
17
18 #include <unordered_set>
19 #include <algorithm>
20 #include "XMLDocShredder.h"
21 #include "XMLTree.h"
22 #include "Utils.h"
23
24 extern "C" {
25 /* OCaml memory managment */
26 #include <caml/mlvalues.h>
27 #include <caml/alloc.h>
28 #include <caml/memory.h>
29 #include <caml/callback.h>
30 #include <caml/fail.h>
31 #include <caml/custom.h>
32 #include "results.h"
33 #include <stdio.h>
34
35 #define CAMLRAISEMSG(msg) (caml_raise_with_string(*cpp_exception,(msg) ))
36 #define NOT_IMPLEMENTED(s)  (caml_failwith(s))
37 #define XMLTREE(x) ((XMLTree *)(* (XMLTree**) Data_custom_val(x)))
38 #define HSET(x) ((TagIdSet*)((* (TagIdSet**) Data_custom_val(x))))
39 #define TEXTCOLLECTION(x)
40 #define TREENODEVAL(i) ((treeNode) (Int_val(i)))
41 #define TAGVAL(i) ((TagType) (Int_val(i)))
42 #define XMLTREE_ROOT 0
43 #define NoAlloc
44
45   
46   static struct custom_operations ops;
47   static struct custom_operations set_ops;
48   static value * cpp_exception = NULL;
49   static bool ops_initialized = false;
50   
51 }
52
53 extern "C" void caml_xml_tree_finalize(value tree){
54   delete XMLTREE(tree);
55   return;
56 }
57
58 extern "C" void caml_hset_finalize(value hblock){
59   delete HSET(hblock);
60   return;
61 }
62
63 extern "C"  value caml_init_lib (value unit) {
64   CAMLparam1(unit);
65   if (!ops_initialized){
66     
67   
68   ops.identifier = (char*) "XMLTree";
69   ops.finalize = caml_xml_tree_finalize;
70   set_ops.identifier = (char*) "unordered_set";
71   set_ops.finalize = caml_hset_finalize;
72   
73   cpp_exception = caml_named_value("CPlusPlusError");
74   if (cpp_exception == NULL){
75     string s = "FATAL: Unregistered exception ";
76     s += "CPlusPlusError";
77     caml_failwith(s.c_str());
78   };
79   
80   ops_initialized = true;
81   
82   };
83   CAMLreturn(Val_unit);
84   
85 }
86 extern "C"  value caml_shredder_parse(XMLDocShredder *shredder){
87   CAMLparam0();
88   CAMLlocal1(doc);
89   XMLTree * tree;
90   shredder->processStartDocument("");  
91   shredder->parse();  
92   shredder->processEndDocument();
93   doc = caml_alloc_custom(&ops,sizeof(XMLTree*),1,2);
94   tree = (XMLTree *) shredder->getXMLTree();
95   memcpy(Data_custom_val(doc),&tree,sizeof(XMLTree*));
96   CAMLreturn(doc);
97   
98 }
99
100 extern "C"  value caml_call_shredder_uri(value uri,value sf, value iet, value dtc){
101   CAMLparam1(uri);
102   CAMLlocal1(doc);
103   char *fn = String_val(uri);
104   XMLDocShredder * shredder;
105   try {
106     shredder = new XMLDocShredder(fn,Int_val(sf),Bool_val(iet),Bool_val(dtc));
107     doc = caml_shredder_parse(shredder);
108     delete shredder;
109   }
110   catch (const std::exception& e){ CAMLRAISEMSG(e.what()); }
111   catch (string  msg){  CAMLRAISEMSG(msg.c_str()); }
112   catch (char const * msg){ CAMLRAISEMSG(msg);  };
113   CAMLreturn (doc);
114   
115 }
116 extern "C"  value caml_call_shredder_string(value data,value sf, value iet, value dtc){
117   CAMLparam1(data);
118   CAMLlocal1(doc);
119   XMLDocShredder * shredder;
120   unsigned int ln = caml_string_length(data);
121   unsigned char *fn = (unsigned char*) String_val(data);
122   try {
123     shredder = new  XMLDocShredder (fn,ln,Int_val(sf),Bool_val(iet),Bool_val(dtc));  
124     doc = caml_shredder_parse(shredder);
125     delete shredder;
126   }
127   catch (const std::exception& e){ CAMLRAISEMSG(e.what()); }
128   catch (string  msg){  CAMLRAISEMSG(msg.c_str()); }
129   catch (char const * msg){ CAMLRAISEMSG(msg);  };
130   CAMLreturn(doc);
131 }
132
133 extern "C"  value caml_xml_tree_save(value tree,value fd, value str){
134   CAMLparam3(tree,fd,str);  
135   XMLTREE(tree)->Save(Int_val(fd), String_val(str));
136   CAMLreturn (Val_unit);
137 }
138
139 extern "C"  value caml_xml_tree_load(value fd, value str, value load_tc,value sf){
140   CAMLparam4(fd,str,load_tc,sf);
141   CAMLlocal1(doc);
142   XMLTree * tree;
143   try {
144     tree = XMLTree::Load(Int_val(fd),String_val(str),Bool_val(load_tc),Int_val(sf));
145     printf("Pointer to tree is %p\n", (void*) tree);
146     doc = caml_alloc_custom(&ops,sizeof(XMLTree*),1,2);
147     memcpy(Data_custom_val(doc),&tree,sizeof(XMLTree*));
148     CAMLreturn(doc);
149   }
150   catch (const xmlpp::internal_error& e){ CAMLRAISEMSG(e.what()); }
151   catch (const std::exception& e){ CAMLRAISEMSG(e.what()); }
152   catch (string  msg){  CAMLRAISEMSG(msg.c_str()); }
153   catch (char const * msg){ CAMLRAISEMSG(msg);  };
154 }
155
156
157 /**
158  *  Interface to the TextCollection
159  */
160
161 /**
162  *  Utility functions
163  */
164
165 extern "C"  value caml_text_collection_get_text(value tree, value id){
166   CAMLparam2(tree,id);
167   CAMLlocal1(str);
168   uchar* txt = XMLTREE(tree)->GetText((DocID) Int_val(id));
169   str = caml_copy_string((const char*)txt);
170   CAMLreturn (str);
171 }
172
173
174 extern "C"  value caml_text_collection_empty_text(value tree,value id){
175   CAMLparam2(tree,id);
176   CAMLreturn ( Val_int((XMLTREE(tree))->EmptyText((DocID) Int_val(id))));
177 }
178
179 bool docId_comp(DocID x, DocID y) { return x < y; };
180
181 /**
182  * Existential queries
183  */
184
185 extern "C"  value caml_text_collection_is_prefix(value tree,value str){
186   CAMLparam2(tree,str);
187   uchar * cstr = (uchar *) String_val(str);  
188   CAMLreturn (Val_bool((int) XMLTREE(tree)->IsPrefix(cstr)));
189 }
190
191 extern "C"  value caml_text_collection_is_suffix(value tree,value str){
192   CAMLparam2(tree,str);
193   uchar * cstr = (uchar *) String_val(str);  
194   CAMLreturn (Val_bool((int) XMLTREE(tree)->IsSuffix(cstr)));
195 }
196 extern "C"  value caml_text_collection_is_equal(value tree,value str){
197   CAMLparam2(tree,str);
198   uchar * cstr = (uchar *) String_val(str);  
199   CAMLreturn (Val_bool((int) XMLTREE(tree)->IsEqual(cstr)));
200 }
201 extern "C"  value caml_text_collection_is_contains(value tree,value str){
202   CAMLparam2(tree,str);
203   uchar * cstr = (uchar *) String_val(str);  
204   CAMLreturn ( Val_bool((int) XMLTREE(tree)->IsContains(cstr)));
205 }
206
207 extern "C"  value caml_text_collection_is_lessthan(value tree,value str){
208   CAMLparam2(tree,str);
209   uchar * cstr = (uchar *) String_val(str);  
210   CAMLreturn ( Val_bool((int) XMLTREE(tree)->IsLessThan(cstr)));
211 }
212
213
214 /**
215  * Count Queries
216  */
217
218 /**
219  *  Global counting
220  */
221 extern "C"  value caml_text_collection_count(value tree,value str){
222   CAMLparam2(tree,str);
223   uchar * cstr = (uchar *) String_val(str);
224   CAMLreturn (Val_int((XMLTREE(tree)->Count(cstr))));
225 }
226
227 extern "C"  value caml_text_collection_count_prefix(value tree,value str){
228   CAMLparam2(tree,str);
229   uchar * cstr = (uchar *) String_val(str);
230   CAMLreturn (Val_int((XMLTREE(tree)->CountPrefix(cstr))));
231 }
232
233 extern "C"  value caml_text_collection_count_suffix(value tree,value str){
234   CAMLparam2(tree,str);
235   uchar * cstr = (uchar *) String_val(str);
236   CAMLreturn (Val_int((XMLTREE(tree)->CountSuffix(cstr))));
237 }
238
239 extern "C"  value caml_text_collection_count_equal(value tree,value str){
240   CAMLparam2(tree,str);
241   uchar * cstr = (uchar *) String_val(str);
242   CAMLreturn (Val_int((XMLTREE(tree)->CountEqual(cstr))));
243 }
244
245 extern "C"  value caml_text_collection_count_contains(value tree,value str){
246   CAMLparam2(tree,str);
247   uchar * cstr = (uchar *) String_val(str);  
248   CAMLreturn (Val_int((XMLTREE(tree)->CountContains(cstr)))); 
249 }
250
251 extern "C"  value caml_text_collection_count_lessthan(value tree,value str){
252   CAMLparam2(tree,str);
253   uchar * cstr = (uchar *) String_val(str);  
254   CAMLreturn (Val_int((XMLTREE(tree)->CountLessThan(cstr)))); 
255 }
256
257 static value sort_alloc_array(std::vector<DocID> results, value resarray){
258   std::sort(results.begin(), results.end(), docId_comp);
259     size_t s = results.size();
260     resarray = caml_alloc_tuple(s);
261     for (size_t i = 0; i < s ;i++){
262       caml_initialize(&Field(resarray,i),Val_int(results[i]));
263     };
264     return resarray; 
265
266 }
267
268 /**
269  * Full reporting queries
270  */
271
272 extern "C"  value caml_text_collection_prefix(value tree,value str){
273   CAMLparam2(tree,str);
274   CAMLlocal1(resarray);
275   uchar * cstr = (uchar *) String_val(str);  
276   std::vector<DocID> results = XMLTREE(tree)->Prefix(cstr);
277   CAMLreturn (sort_alloc_array(results,resarray));  
278 }
279
280 extern "C"  value caml_text_collection_suffix(value tree,value str){
281   CAMLparam2(tree,str);
282   CAMLlocal1(resarray);
283   uchar * cstr = (uchar *) String_val(str);  
284   std::vector<DocID> results = XMLTREE(tree)->Suffix(cstr);
285   CAMLreturn (sort_alloc_array(results,resarray));  
286 }
287
288 extern "C"  value caml_text_collection_equals(value tree,value str){
289   CAMLparam2(tree,str);
290   CAMLlocal1(resarray);
291   uchar * cstr = (uchar *) strdup(String_val(str));  
292   std::vector<DocID> results = XMLTREE(tree)->Equals(cstr);
293   free(cstr);
294   CAMLreturn (sort_alloc_array(results,resarray));  
295 }
296
297 extern "C"  value caml_text_collection_contains(value tree,value str){
298   CAMLparam2(tree,str);
299   CAMLlocal1(resarray);
300   uchar * cstr = (uchar *) String_val(str);  
301   std::vector<DocID> results = XMLTREE(tree)->Contains(cstr);
302   CAMLreturn (sort_alloc_array(results,resarray));  
303 }
304
305 extern "C"  value caml_text_collection_lessthan(value tree,value str){
306   CAMLparam2(tree,str);
307   CAMLlocal1(resarray);
308   uchar * cstr = (uchar *) String_val(str);  
309   std::vector<DocID> results = XMLTREE(tree)->LessThan(cstr);
310   CAMLreturn (sort_alloc_array(results,resarray));  
311 }
312
313 /** Full reporting into a bit vector
314  */
315
316 extern "C"  value caml_text_collection_prefix_bv(value tree,value str){
317   CAMLparam2(tree,str);
318   uchar * cstr = (uchar *) strdup(String_val(str));
319   std::vector<DocID> results = XMLTREE(tree)->Prefix(cstr);
320   std::vector<bool> *bv = new std::vector<bool>(XMLTREE(tree)->Size(),false);
321   for (unsigned int i=0; i < results.size(); i++)
322     bv->at(XMLTREE(tree)->ParentNode(results[i]))=true;
323   free(cstr);
324   CAMLreturn ((value) bv);
325 }
326
327 extern "C"  value caml_text_collection_suffix_bv(value tree,value str){
328   CAMLparam2(tree,str);
329   uchar * cstr = (uchar *) strdup(String_val(str));
330   std::vector<DocID> results = XMLTREE(tree)->Suffix(cstr);
331   std::vector<bool> *bv = new std::vector<bool>(XMLTREE(tree)->Size(),false);
332   for (unsigned int i=0; i < results.size(); i++)
333     bv->at(XMLTREE(tree)->ParentNode(results[i]))=true;
334   free(cstr);
335   CAMLreturn ((value) bv);
336 }
337
338 extern "C"  value caml_text_collection_equals_bv(value tree,value str){
339   CAMLparam2(tree,str);
340   uchar * cstr = (uchar *) strdup(String_val(str));
341   XMLTree* xt = XMLTREE(tree);
342   std::vector<DocID> results = xt->Equals(cstr);
343   std::vector<bool> *bv = new std::vector<bool>(xt->Size(),false);
344   for (unsigned int i=0; i < results.size(); i++)
345     bv->at(xt->Parent(xt->ParentNode(results[i])))=true;
346   free(cstr);
347   CAMLreturn ((value) bv);
348 }
349
350
351 extern "C"  value caml_text_collection_contains_bv(value tree,value str){
352   CAMLparam2(tree,str);
353   uchar * cstr = (uchar *) strdup(String_val(str));
354   XMLTree* xt = XMLTREE(tree);
355   std::vector<DocID> results = xt->Contains(cstr);
356   std::vector<bool> *bv = new std::vector<bool>(xt->Size(),false);
357   for (unsigned int i=0; i < results.size(); i++){
358     bv->at(xt->Parent(xt->ParentNode(results[i])))=true;
359   }
360   free(cstr);
361   CAMLreturn ((value) bv);
362 }
363
364 extern "C" value caml_text_collection_contains_bv_update(value tree,value str,value vbv){
365   CAMLparam3(tree,str,vbv);
366   uchar * cstr = (uchar *) strdup(String_val(str));
367   XMLTree* xt = XMLTREE(tree);
368   std::vector<DocID> results = xt->Contains(cstr);
369   std::vector<bool> *bv = (std::vector<bool> *) vbv;
370   for (unsigned int i=0; i < results.size(); i++){
371     /** Hack for the Techfest demo */
372     (*bv)[xt->Parent(xt->Parent(xt->ParentNode(results[i])))]=true;   
373   }
374   free(cstr);
375   CAMLreturn ((value) bv);
376 }
377 extern "C" value caml_text_collection_contains_bv_update_list(value tree,value str,value acc,value vbv,value count){
378   CAMLparam4(tree,str,acc,vbv);
379   CAMLlocal1(head);
380   uchar * cstr = (uchar *) strdup(String_val(str));
381   XMLTree* xt = XMLTREE(tree);
382   std::vector<DocID> results = xt->Contains(cstr);
383   std::vector<bool> *bv = (std::vector<bool> *) vbv;
384   treeNode idx;
385   int acc_count = Int_val(count);
386   for (unsigned int i=0; i < results.size(); i++){
387     idx = xt->Parent(xt->Parent(xt->ParentNode(results[i])));
388     if (!(*bv)[idx]) {
389         (*bv)[idx]=true;
390         head = caml_alloc_tuple(2);
391         caml_initialize(&Field(head,0),Val_int(idx));
392         caml_initialize(&Field(head,1),acc);
393         acc=head;
394         acc_count++;
395     };
396   };
397   free(cstr);
398   head = caml_alloc_tuple(3);
399   caml_initialize(&Field(head,0),acc);
400   caml_initialize(&Field(head,1),(value) bv);
401   caml_initialize(&Field(head,2),Val_int(acc_count));
402   CAMLreturn (head);
403 }
404
405 extern "C"  value caml_text_collection_lessthan_bv(value tree,value str){
406   CAMLparam2(tree,str);
407   uchar * cstr = (uchar *) strdup(String_val(str));
408   std::vector<DocID> results = XMLTREE(tree)->LessThan(cstr);
409   std::vector<bool> *bv = new std::vector<bool>(XMLTREE(tree)->Size(),false);
410   for (unsigned int i=0; i < results.size(); i++)
411     bv->at(XMLTREE(tree)->ParentNode(results[i]))=true;
412   free(cstr);
413   CAMLreturn ((value) bv);
414 }
415
416 /*************************************************************************/
417
418 /**
419  *  XMLTree bindings
420  *  All of the functions here call the _unsafe version and implement the logics themselves
421  *  (test for NULLT and so on). This avoids one indirection + one call when the tests fails.
422  */
423
424
425 NoAlloc extern "C"  value caml_xml_tree_root(value tree){
426   return (Val_int(XMLTREE_ROOT));
427 }
428
429 NoAlloc extern "C"  value caml_xml_tree_size(value tree){
430   return (Val_int(XMLTREE(tree)->Size()));
431 }
432
433 NoAlloc extern "C"  value caml_xml_tree_subtree_size(value tree, value node){
434   return (Val_int(XMLTREE(tree)->SubtreeSize(TREENODEVAL(node))));
435 }
436
437 NoAlloc extern "C"  value caml_xml_tree_subtree_tags(value tree, value node, value tag){
438   return (Val_int(XMLTREE(tree)->SubtreeTags(TREENODEVAL(node), TAGVAL(tag))));
439 }
440
441 NoAlloc extern "C"  value caml_xml_tree_subtree_elements(value tree, value node){
442   return (Val_int(XMLTREE(tree)->SubtreeElements(TREENODEVAL(node))));
443 }
444
445 NoAlloc extern "C"  value caml_xml_tree_is_leaf(value tree, value node){
446   return (Val_bool(XMLTREE(tree)->IsLeaf(TREENODEVAL(node))));
447 }
448
449 NoAlloc extern "C"  value caml_xml_tree_is_ancestor(value tree, value node1,value node2){
450   return (Val_bool(XMLTREE(tree)->IsAncestor(TREENODEVAL(node1),TREENODEVAL(node2))));
451 }
452
453 NoAlloc extern "C"  value caml_xml_tree_is_child(value tree, value node1,value node2){
454   return (Val_bool(XMLTREE(tree)->IsChild(TREENODEVAL(node1),TREENODEVAL(node2))));
455 }
456
457 NoAlloc extern "C"  value caml_xml_tree_is_first_child(value tree, value node){
458   return (Val_bool(XMLTREE(tree)->IsFirstChild(TREENODEVAL(node))));
459 }
460
461 NoAlloc extern "C"  value caml_xml_tree_num_children(value tree, value node){
462   return (Val_int(XMLTREE(tree)->NumChildren(TREENODEVAL(node))));
463 }
464
465 NoAlloc extern "C"  value caml_xml_tree_child_number(value tree, value node){
466   return (Val_int(XMLTREE(tree)->ChildNumber(TREENODEVAL(node))));
467 }
468
469 NoAlloc extern "C"  value caml_xml_tree_depth(value tree, value node){
470   return (Val_int(XMLTREE(tree)->Depth(TREENODEVAL(node))));
471 }
472
473 NoAlloc extern "C"  value caml_xml_tree_preorder(value tree, value node){
474   return (Val_int(XMLTREE(tree)->Preorder(TREENODEVAL(node))));
475 }
476
477 NoAlloc extern "C"  value caml_xml_tree_postorder(value tree, value node){
478   return (Val_int(XMLTREE(tree)->Postorder(TREENODEVAL(node))));
479 }
480
481 NoAlloc extern "C"  value caml_xml_tree_tag(value tree, value node){
482   return (Val_int(XMLTREE(tree)->Tag(TREENODEVAL(node))));
483 }
484
485 extern "C"  value caml_xml_tree_doc_ids(value tree, value node){
486   CAMLparam2(tree,node);
487   CAMLlocal1(tuple);
488   range ids;
489   tuple = caml_alloc(2,0);
490   ids = XMLTREE(tree)->DocIds(Int_val(node));
491   Store_field(tuple,0,Val_int(ids.min));
492   Store_field(tuple,1,Val_int(ids.max));
493   CAMLreturn (tuple);
494 }
495
496 NoAlloc extern "C"  value caml_xml_tree_parent(value tree, value node){
497   return (Val_int(XMLTREE(tree)->Parent(TREENODEVAL(node))));
498 }
499
500 NoAlloc extern "C"  value caml_xml_tree_child(value tree, value node,value idx){
501   return (Val_int(XMLTREE(tree)->Child(TREENODEVAL(node),Int_val(idx))));
502 }
503
504 NoAlloc extern "C"  value caml_xml_tree_first_child(value tree, value node){
505   return (Val_int(XMLTREE(tree)->FirstChild(TREENODEVAL(node))));
506 }
507
508 NoAlloc extern "C"  value caml_xml_tree_first_element(value tree, value node){
509   return (Val_int(XMLTREE(tree)->FirstElement(TREENODEVAL(node))));
510 }
511
512 NoAlloc extern "C"  value caml_xml_tree_last_child(value tree, value node){
513   return (Val_int(XMLTREE(tree)->LastChild(TREENODEVAL(node))));
514 }
515
516 NoAlloc extern "C"  value caml_xml_tree_next_sibling(value tree, value node){
517   return (Val_int(XMLTREE(tree)->NextSibling(TREENODEVAL(node))));
518 }
519
520 NoAlloc extern "C"  value caml_xml_tree_next_element(value tree, value node){
521   return (Val_int(XMLTREE(tree)->NextElement(TREENODEVAL(node))));
522 }
523
524 NoAlloc extern "C"  value caml_xml_tree_prev_sibling(value tree, value node){
525   return (Val_int(XMLTREE(tree)->PrevSibling(TREENODEVAL(node))));
526 }
527
528 NoAlloc extern "C"  value caml_xml_tree_tagged_child(value tree, value node,value tag){
529   return (Val_int(XMLTREE(tree)->TaggedChild(TREENODEVAL(node),TAGVAL(tag))));
530 }
531
532 NoAlloc extern "C"  value caml_xml_tree_select_child(value tree, value node,value tags){
533   return (Val_int(XMLTREE(tree)->SelectChild(TREENODEVAL(node), HSET(tags))));
534 }
535
536 NoAlloc extern "C"  value caml_xml_tree_tagged_following_sibling(value tree, value node,value tag){
537   return (Val_int(XMLTREE(tree)->TaggedFollowingSibling(TREENODEVAL(node),TAGVAL(tag))));
538 }
539
540 NoAlloc extern "C"  value caml_xml_tree_select_following_sibling(value tree, value node,value tags){
541   return (Val_int(XMLTREE(tree)->SelectFollowingSibling(TREENODEVAL(node), HSET(tags))));
542 }
543
544 NoAlloc extern "C"  value caml_xml_tree_tagged_descendant(value tree, value node, value tag){
545   return (Val_int(XMLTREE(tree)->TaggedDescendant(TREENODEVAL(node), TAGVAL(tag))));
546 }
547
548 NoAlloc extern "C"  value caml_xml_tree_select_descendant(value tree, value node, value tags){
549   return (Val_int(XMLTREE(tree)->SelectDescendant(TREENODEVAL(node), HSET(tags))));
550 }
551
552 NoAlloc extern "C"  value caml_xml_tree_tagged_preceding(value tree, value node, value tag){
553   return (Val_int(XMLTREE(tree)->TaggedPreceding(TREENODEVAL(node), TAGVAL(tag))));
554 }
555
556 NoAlloc extern "C"  value caml_xml_tree_tagged_following(value tree, value node, value tag){
557   return (Val_int(XMLTREE(tree)->TaggedFollowing(TREENODEVAL(node), TAGVAL(tag))));
558 }
559
560 NoAlloc extern "C"  value caml_xml_tree_tagged_following_below(value tree, value node, value tag, value ancestor){
561   return (Val_int(XMLTREE(tree)->TaggedFollowingBelow(TREENODEVAL(node), TAGVAL(tag), TREENODEVAL(ancestor))));
562 }
563
564 NoAlloc extern "C"  value caml_xml_tree_select_following_below(value tree, value node, value tags, value ancestor){
565   return (Val_int(XMLTREE(tree)->SelectFollowingBelow(TREENODEVAL(node), HSET(tags), TREENODEVAL(ancestor))));
566 }
567
568 NoAlloc extern "C"  value caml_xml_tree_tagged_following_before(value tree, value node, value tag, value closing){
569   return (Val_int(XMLTREE(tree)->TaggedFollowingBefore(TREENODEVAL(node), TAGVAL(tag), TREENODEVAL(closing))));
570 }
571
572 NoAlloc extern "C"  value caml_xml_tree_select_following_before(value tree, value node, value tags, value closing){
573   return (Val_int(XMLTREE(tree)->SelectFollowingBefore(TREENODEVAL(node), HSET(tags), TREENODEVAL(closing))));
574 }
575
576 NoAlloc extern "C"  value caml_xml_tree_tagged_ancestor(value tree, value node, value tag){
577   return (Val_int(XMLTREE(tree)->TaggedAncestor(TREENODEVAL(node), TAGVAL(tag))));
578 }
579
580 NoAlloc extern "C"  value caml_xml_tree_my_text(value tree, value node){
581   return (Val_int(XMLTREE(tree)->MyText(TREENODEVAL(node))));
582 }
583
584 NoAlloc extern "C"  value caml_xml_tree_my_text_unsafe(value tree, value node){
585   return (Val_int(XMLTREE(tree)->MyTextUnsafe(TREENODEVAL(node))));
586 }
587
588 NoAlloc extern "C"  value caml_xml_tree_text_xml_id(value tree, value docid){
589   return (Val_int(XMLTREE(tree)->TextXMLId(Int_val(docid))));
590 }
591
592 NoAlloc extern "C"  value caml_xml_tree_node_xml_id(value tree, value node){
593   return (Val_int(XMLTREE(tree)->NodeXMLId(TREENODEVAL(node))));
594 }
595
596 NoAlloc extern "C"  value caml_xml_tree_parent_node(value tree, value docid){
597   return (Val_int(XMLTREE(tree)->ParentNode(Int_val(docid))));
598 }
599 /*
600 NoAlloc extern "C"  value caml_xml_tree_prev_node(value tree, value docid){
601   return (Val_int(XMLTREE(tree)->PrevNode(Int_val(docid))));
602 }
603 */
604 extern "C"  value caml_xml_tree_get_tag_id(value tree, value tagname){
605   CAMLparam2(tree,tagname);
606   CAMLlocal1(res);
607   unsigned char* ctagname = (unsigned char*) strdup(String_val(tagname));
608   res = Val_int(XMLTREE(tree)->GetTagId(ctagname));
609   free(ctagname);
610   CAMLreturn(res);
611 }
612
613 extern "C"  value caml_xml_tree_get_tag_name(value tree, value tag){
614   CAMLparam2(tree,tag);
615   CAMLlocal1(res);
616   res = caml_copy_string((const char*) XMLTREE(tree)->GetTagNameByRef(TAGVAL(tag)));
617   CAMLreturn(res);
618 }
619
620 extern "C"  value caml_xml_tree_register_tag(value tree, value tagname){
621   CAMLparam2(tree,tagname);
622   CAMLlocal1(res);
623   unsigned char* ctagname = (unsigned char*) strdup(String_val(tagname));
624   res = Val_int(XMLTREE(tree)->RegisterTag(ctagname));
625   free(ctagname);
626   CAMLreturn(res);
627 }
628
629
630 NoAlloc extern "C"  value caml_xml_tree_get_text_collection(value tree){
631   return((value) XMLTREE(tree)->getTextCollection());
632 }
633
634 NoAlloc extern "C"  value caml_xml_tree_closing(value tree, value node){
635   return (Val_int(XMLTREE(tree)->Closing(TREENODEVAL(node))));
636 }
637
638 NoAlloc extern "C"  value caml_xml_tree_is_open(value tree, value node){
639   return (Val_bool(XMLTREE(tree)->IsOpen(TREENODEVAL(node))));
640 }
641
642
643
644 NoAlloc extern "C"  value caml_xml_tree_nullt(value unit){
645   return (NULLT);
646 }
647
648 NoAlloc extern "C"  value caml_unordered_set_length(value hset){
649   return (Val_int((HSET(hset))->size()));
650 }
651
652 extern "C"  value caml_unordered_set_alloc(value unit){
653   CAMLparam1(unit);
654   CAMLlocal1(hset);
655   hset = caml_alloc_custom(&set_ops,sizeof(TagIdSet*),1,2);
656   TagIdSet* ht = new TagIdSet();
657   memcpy(Data_custom_val(hset),&ht,sizeof(TagIdSet*));
658   CAMLreturn (hset);
659 }
660
661 NoAlloc extern "C"  value caml_unordered_set_set(value set, value v){  
662   HSET(set)->insert((int) Int_val(v));
663   return (Val_unit);
664 }
665
666 NoAlloc extern "C" value caml_result_set_create(value size){  
667   results* res = (results*) malloc(sizeof(results));
668   results r = createResults (Int_val(size));  
669   res->n = r.n;
670   res->lgn = r.lgn;
671   res->tree = r.tree;
672   return ((value) (res));
673 }
674
675 NoAlloc extern "C"  value caml_result_set_set(value result,value p){
676   setResult (  *((results*) result), Int_val(p));
677   return (Val_unit);
678 }
679
680 NoAlloc extern "C"  value caml_result_set_clear(value result,value p1,value p2){
681   clearRange ( *((results*) result), Int_val(p1), Int_val(p2));
682   return (Val_unit);
683 }
684
685 NoAlloc extern "C"  value caml_result_set_next(value result,value p){
686   results r;
687   r = *( (results *) result);
688   return (Val_int(nextResult(r, Int_val(p))));
689 }
690
691 NoAlloc extern "C" value caml_result_set_count(value result){
692   results r;
693   r = *( (results *) result);
694   return (Val_int(countResult(r)));
695 }
696
697 NoAlloc extern "C"  value caml_xml_tree_print(value tree,value node,value fd){
698   CAMLparam3(tree,node,fd);
699   XMLTREE(tree)->Print(Int_val(fd),TREENODEVAL(node), false);
700   CAMLreturn(Val_unit);
701 }
702
703 NoAlloc extern "C" value caml_set_tag_bits(value result, value tag, value tree, value node)
704 {
705   results r;
706   XMLTree *t = XMLTREE(Field(tree,0));
707   treeNode opening = TREENODEVAL(node);
708   treeNode closing = t->Closing(opening);
709   TagType target_tag = Int_val(tag);
710   treeNode first = t->TaggedDescendant(opening,target_tag);
711   r = *( (results *) result);
712   opening = first;
713   while (opening != NULLT){
714     setResult(r,opening);
715     opening = t->TaggedFollowingBefore(opening,target_tag,closing);
716   };
717   return(Val_int(first));
718 }
719     
720
721 NoAlloc extern "C" value caml_bit_vector_create(value size){
722   return (value) (new vector<bool>(Int_val(size),false));     
723 }
724
725 NoAlloc extern "C" value caml_bit_vector_free(value vect){
726   delete ((vector<bool>*) vect);
727   return Val_unit;
728 }
729
730 NoAlloc extern "C" value caml_bit_vector_get(value vect,value idx){
731   return Val_bool (((vector<bool>*)vect)->at(Int_val(idx)));
732 }
733
734 NoAlloc extern "C" value caml_bit_vector_set(value vect,value idx,value b){
735   (((vector<bool>*)vect)->at(Int_val(idx))) = (bool) Bool_val(b);
736   return Val_unit;
737 }
738
739 NoAlloc extern "C" value caml_bit_vector_next(value vect,value idx){
740   vector<bool>* bv = (vector<bool>*) vect;
741   int i = Int_val(idx);
742   int l = bv->size();
743   while (i < l && !((*bv)[i]))
744     i++;
745   return Val_int(i);
746 }
747 NoAlloc extern "C" value caml_bit_vector_prev(value vect,value idx){
748   int i = Int_val(idx);
749   while (i >= 0 && !((*((vector<bool>*) vect))[i]))
750     i--;
751   return Val_int(i);
752 }
753
754 extern "C" value caml_bit_vector_node_array(value vect){
755   CAMLparam0();
756   CAMLlocal1(res);
757   vector<bool>* bv = (vector<bool>*) vect;
758   vector<treeNode> vr;
759   int l = bv->size();
760   int i = 0;
761   while (i < l){
762     if ((*bv)[i]) vr.push_back(i);
763     i++;
764   };
765   l = vr.size();
766   res = caml_alloc_tuple(l);
767   for(i=0;i<l;i++)
768     caml_initialize(&Field(res,i),Val_int(vr[i]));
769   CAMLreturn (res);
770 }
771
772
773 int iterjump(XMLTree* tree, treeNode node, TagType tag, treeNode anc){
774   if (node == NULLT)
775     return 0;
776   else {
777     return 
778       1
779       + iterjump(tree,tree->TaggedDescendant(node,tag),tag,node)
780       + iterjump(tree,tree->TaggedFollowingBelow(node,tag,anc),tag,anc);
781   };
782 }
783
784 extern "C" value caml_benchmark_jump(value tree,value tag){
785   int count;
786   treeNode root = XMLTREE(tree)->FirstChild(0);
787   root = XMLTREE(tree)->FirstChild(root);
788   count = iterjump(XMLTREE(tree), root , Int_val(tag),0);
789   return Val_unit;
790 }
791
792 int iterfcns(XMLTree* tree, treeNode node){
793   if (node == NULLT)
794     return 0;
795   else {
796     int tmp = 1;
797     tmp += iterfcns(tree,tree->FirstChild(node));
798     tmp += iterfcns(tree,tree->NextSibling(node));
799     return tmp;    
800   };
801 }
802
803 int iterfene(XMLTree* tree, treeNode node){
804   if (node == NULLT)
805     return 0;
806   else {
807     int tmp = 1;
808     tmp += iterfene(tree,tree->FirstElement(node));
809     tmp += iterfene(tree,tree->NextElement(node));
810     return tmp;    
811   };
812 }
813
814 extern "C" value caml_benchmark_fcns(value tree){
815   int i = iterfcns(XMLTREE(tree),0);
816   return Val_int(i);
817                     
818 }
819
820 extern "C" value caml_benchmark_fene(value tree){
821   int i = iterfene(XMLTREE(tree),0);
822   return Val_int(i);
823                     
824 }
825
826 int iterlcps(XMLTree* tree, treeNode node){
827   if (node == NULLT)
828     return 0;
829   else {
830     int x = tree->Tag(node);
831     x += iterlcps(tree,tree->LastChild(node));
832     x += iterlcps(tree,tree->PrevSibling(node));
833     return x;
834   };
835 }
836
837 int fulliterative(XMLTree* tree){
838   treeNode current = tree->Root();
839   treeNode next = NULLT;
840   int count = 1; //the root
841
842   do {
843   
844
845     while ((next = tree->FirstChild(current)) != NULLT) {
846       current = next;
847       count++;
848     };
849
850     while ( (next = tree->NextSibling(current)) == NULLT){
851       current = tree->Parent(current);
852       if (current == NULLT) return count;
853     }
854     current = next;
855     count++;
856   } while (true);
857
858 }
859
860 extern "C" value caml_benchmark_iter(value tree){
861   return Val_int(fulliterative(XMLTREE(tree)));
862 }
863
864 extern "C" value caml_benchmark_lcps(value tree){  
865   iterlcps(XMLTREE(tree),0);
866   return Val_unit;
867
868 }
869
870 extern "C" {
871
872   typedef struct dummy_node_ {
873     struct dummy_node_* first;
874     struct dummy_node_* next;
875   } dummy_node;
876   
877   
878   dummy_node * new_dummy_node () {
879     
880     dummy_node * node = (dummy_node*) malloc(sizeof(dummy_node));
881     if (!node)
882       printf("%s","Cannot allocate memory\n");
883     
884     return node;
885   }
886
887   void free_tree(dummy_node * node){
888     if (node){
889       free_tree(node->first);
890       free_tree(node->next);
891       free(node);
892     };
893     return;
894   }
895
896   dummy_node * create_tree(XMLTree* tree, treeNode i, int mode){
897     if (i == NULLT)
898        return NULL;
899     else {
900       dummy_node * f, *n, *r;
901       //mode = i % 3;
902       if (mode == 0) r = new_dummy_node();
903       f = create_tree(tree,tree->FirstChild(i), mode);
904       if (mode == 1) r = new_dummy_node();
905       n = create_tree(tree,tree->NextSibling(i), mode);
906       if (mode == 2) r = new_dummy_node();
907       r->first = f;
908       r->next = n;
909       return r;
910     };
911   }
912       
913   int iter_tree(dummy_node * n){
914     if (n == NULL)
915       return 0;
916     else
917       return 1 + iter_tree (n->first) + iter_tree (n->next);
918   }
919 }
920 extern "C" value caml_build_pointers(value tree, value mode){
921   return ((value) create_tree(XMLTREE(Field(tree,0)),0, Int_val(mode)));
922 }
923
924 extern "C" value caml_iter_pointers (value node){
925   return Val_int(iter_tree((dummy_node*) node));
926
927 }
928
929 extern "C" value caml_free_pointers(value node){
930   free_tree((dummy_node*) node);
931   return Val_unit;
932 }