src/com/hughes/android/dictionary/parser/wiktionary/EnFunctionCallbacks.java

   1 // Copyright 2012 Google Inc. All Rights Reserved.
   2 //
   3 // Licensed under the Apache License, Version 2.0 (the "License");
   4 // you may not use this file except in compliance with the License.
   5 // You may obtain a copy of the License at
   6 //
   7 //     http://www.apache.org/licenses/LICENSE-2.0
   8 //
   9 // Unless required by applicable law or agreed to in writing, software
  10 // distributed under the License is distributed on an "AS IS" BASIS,
  11 // WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12 // See the License for the specific language governing permissions and
  13 // limitations under the License.
  14
  15 package com.hughes.android.dictionary.parser.wiktionary;
  16
  17 import com.hughes.android.dictionary.engine.EntryTypeName;
  18 import com.hughes.android.dictionary.engine.IndexBuilder;
  19 import com.hughes.android.dictionary.parser.WikiTokenizer;
  20 import com.hughes.android.dictionary.parser.wiktionary.AbstractWiktionaryParser.AppendAndIndexWikiCallback;
  21 import com.hughes.android.dictionary.parser.wiktionary.AbstractWiktionaryParser.NameAndArgs;
  22 import com.hughes.util.ListUtil;
  23 import com.hughes.util.MapUtil;
  24
  25 import java.util.Arrays;
  26 import java.util.LinkedHashMap;
  27 import java.util.LinkedHashSet;
  28 import java.util.List;
  29 import java.util.Map;
  30 import java.util.Set;
  31 import java.util.concurrent.atomic.AtomicInteger;
  32
  33 class EnFunctionCallbacks {
  34
  35   static final Map<String,FunctionCallback<EnParser>> DEFAULT = new LinkedHashMap<String, FunctionCallback<EnParser>>();
  36
  37   static <T extends AbstractWiktionaryParser> void addGenericCallbacks(Map<String, FunctionCallback<T>> callbacks) {
  38       FunctionCallback<T> callback = new Gender<T>();
  39       callbacks.put("m", callback);
  40       callbacks.put("f", callback);
  41       callbacks.put("n", callback);
  42       callbacks.put("p", callback);
  43       callbacks.put("g", callback);
  44
  45       callback = new EncodingCallback<T>();
  46       Set<String> encodings = new LinkedHashSet<String>(Arrays.asList(
  47           "IPA", "IPAchar",  // Not really encodings, but it works.
  48           "zh-ts", "zh-tsp",
  49           "sd-Arab", "ku-Arab", "Arab", "unicode", "Laoo", "ur-Arab", "Thai",
  50           "fa-Arab", "Khmr", "Cyrl", "ug-Arab", "ko-inline",
  51           "Jpan", "Kore", "Hebr", "rfscript", "Beng", "Mong", "Knda", "Cyrs",
  52           "yue-tsj", "Mlym", "Tfng", "Grek", "yue-yue-j"));
  53       for (final String encoding : encodings) {
  54           callbacks.put(encoding, callback);
  55       }
  56
  57       callback = new Ignore<T>();
  58       callbacks.put("trreq", callback);
  59       callbacks.put("t-image", callback);
  60       callbacks.put("defn", callback);
  61       callbacks.put("rfdef", callback);
  62       callbacks.put("rfdate", callback);
  63       callbacks.put("rfex", callback);
  64       callbacks.put("rfquote", callback);
  65       callbacks.put("attention", callback);
  66       callbacks.put("zh-attention", callback);
  67       callbacks.put("top2", callback);
  68       callbacks.put("mid2", callback);
  69       callbacks.put("bottom", callback);
  70
  71       callback = new AppendName<T>();
  72       callbacks.put("...", callback);
  73
  74       callbacks.put("qualifier", new QualifierCallback<T>());
  75       callbacks.put("italbrac", new italbrac<T>());
  76       callbacks.put("gloss", new gloss<T>());
  77       callbacks.put("not used", new not_used<T>());
  78       callbacks.put("wikipedia", new wikipedia<T>());
  79
  80       final it_conj<T> it_conj_cb = new it_conj<T>();
  81       callbacks.put("it-conj", it_conj_cb);
  82       callbacks.put("it-conj-are", new it_conj_are<T>(it_conj_cb));
  83       callbacks.put("it-conj-arsi", new it_conj_are<T>(it_conj_cb));
  84       callbacks.put("it-conj-care", new it_conj_are<T>(it_conj_cb));
  85       callbacks.put("it-conj-carsi", new it_conj_are<T>(it_conj_cb));
  86       callbacks.put("it-conj-ciare", new it_conj_are<T>(it_conj_cb));
  87       callbacks.put("it-conj-ciarsi", new it_conj_are<T>(it_conj_cb));
  88       callbacks.put("it-conj-iare", new it_conj_are<T>(it_conj_cb));
  89       callbacks.put("it-conj-iarsi", new it_conj_are<T>(it_conj_cb));
  90       callbacks.put("it-conj-iare-b", new it_conj_are<T>(it_conj_cb));
  91       callbacks.put("it-conj-iarsi-b", new it_conj_are<T>(it_conj_cb));
  92       callbacks.put("it-conj-ire", new it_conj_ire<T>(it_conj_cb));
  93       callbacks.put("it-conj-irsi", new it_conj_ire<T>(it_conj_cb));
  94       callbacks.put("it-conj-ire-b", new it_conj_ire<T>(it_conj_cb));
  95       callbacks.put("it-conj-irsi-b", new it_conj_ire<T>(it_conj_cb));
  96       callbacks.put("it-conj-cire", new it_conj_ire<T>(it_conj_cb));
  97       callbacks.put("it-conj-cirsi", new it_conj_ire<T>(it_conj_cb));
  98       callbacks.put("it-conj-ire", new it_conj_ire<T>(it_conj_cb));
  99       callbacks.put("it-conj-ere", new it_conj_ere<T>(it_conj_cb));
 100       callbacks.put("it-conj-ersi", new it_conj_ere<T>(it_conj_cb));
 101       callbacks.put("it-conj-urre", new it_conj_urre<T>(it_conj_cb));
 102       callbacks.put("it-conj-ursi", new it_conj_urre<T>(it_conj_cb));
 103       callbacks.put("it-conj-fare", new it_conj_fare<T>(it_conj_cb));
 104
 105
 106       //"{{it-conj-fare|putre|avere}}\n" +
 107
 108
 109   }
 110
 111   static {
 112     addGenericCallbacks(DEFAULT);
 113
 114     FunctionCallback<EnParser> callback = new TranslationCallback<EnParser>();
 115     DEFAULT.put("t", callback);
 116     DEFAULT.put("t+", callback);
 117     DEFAULT.put("t-", callback);
 118     DEFAULT.put("tø", callback);
 119     DEFAULT.put("apdx-t", callback);
 120
 121     callback = new l_term();
 122     DEFAULT.put("l", callback);
 123     DEFAULT.put("term", callback);
 124
 125     //callback = new AppendArg0();
 126
 127     callback = new FormOf();
 128     DEFAULT.put("form of", callback);
 129     DEFAULT.put("conjugation of", callback);
 130     DEFAULT.put("participle of", callback);
 131     DEFAULT.put("present participle of", callback);
 132     DEFAULT.put("past participle of", callback);
 133     DEFAULT.put("feminine past participle of", callback);
 134     DEFAULT.put("gerund of", callback);
 135     DEFAULT.put("feminine of", callback);
 136     DEFAULT.put("plural of", callback);
 137     DEFAULT.put("feminine plural of", callback);
 138     DEFAULT.put("inflected form of", callback);
 139     DEFAULT.put("alternative form of", callback);
 140     DEFAULT.put("dated form of", callback);
 141     DEFAULT.put("apocopic form of", callback);
 142
 143     callback = new InflOrHead();
 144     DEFAULT.put("infl", callback);
 145     DEFAULT.put("head", callback);
 146   }
 147
 148   static final NameAndArgs<EnParser> NAME_AND_ARGS = new NameAndArgs<EnParser>();
 149
 150   // ------------------------------------------------------------------
 151
 152   static final class TranslationCallback<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 153     @Override
 154     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 155         final Map<String, String> namedArgs, final T parser,
 156         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 157
 158       final String transliteration = namedArgs.remove("tr");
 159       final String alt = namedArgs.remove("alt");
 160       namedArgs.keySet().removeAll(EnParser.USELESS_WIKI_ARGS);
 161       if (args.size() < 2) {
 162         if (!name.equals("ttbc")) {
 163           EnParser.LOG.warning("{{t...}} with wrong args: title=" + parser.title + ", " + wikiTokenizer.token());
 164         }
 165         return false;
 166       }
 167       final String langCode = ListUtil.get(args, 0);
 168       if (!appendAndIndexWikiCallback.langCodeToTCount.containsKey(langCode)) {
 169         appendAndIndexWikiCallback.langCodeToTCount.put(langCode, new AtomicInteger());
 170       }
 171       appendAndIndexWikiCallback.langCodeToTCount.get(langCode).incrementAndGet();
 172       final String word = ListUtil.get(args, 1);
 173       appendAndIndexWikiCallback.dispatch(alt != null ? alt : word, EntryTypeName.WIKTIONARY_TITLE_MULTI);
 174
 175       // Genders...
 176       if (args.size() > 2) {
 177         appendAndIndexWikiCallback.builder.append(" {");
 178         for (int i = 2; i < args.size(); ++i) {
 179           if (i > 2) {
 180             appendAndIndexWikiCallback.builder.append("|");
 181           }
 182           appendAndIndexWikiCallback.builder.append(args.get(i));
 183         }
 184         appendAndIndexWikiCallback.builder.append("}");
 185       }
 186
 187       if (transliteration != null) {
 188         appendAndIndexWikiCallback.builder.append(" (");
 189         appendAndIndexWikiCallback.dispatch(transliteration, EntryTypeName.WIKTIONARY_TRANSLITERATION);
 190         appendAndIndexWikiCallback.builder.append(")");
 191       }
 192
 193       if (alt != null) {
 194         // If alt wasn't null, we appended alt instead of the actual word
 195         // we're filing under..
 196         appendAndIndexWikiCallback.builder.append(" (");
 197         appendAndIndexWikiCallback.dispatch(word, EntryTypeName.WIKTIONARY_TITLE_MULTI);
 198         appendAndIndexWikiCallback.builder.append(")");
 199       }
 200
 201       // Catch-all for anything else...
 202       if (!namedArgs.isEmpty()) {
 203         appendAndIndexWikiCallback.builder.append(" {");
 204         EnParser.appendNamedArgs(namedArgs, appendAndIndexWikiCallback);
 205         appendAndIndexWikiCallback.builder.append("}");
 206       }
 207
 208       return true;
 209     }
 210   }
 211
 212   // ------------------------------------------------------------------
 213
 214   static final class QualifierCallback<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 215     @Override
 216     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 217         final Map<String, String> namedArgs,
 218         final T parser,
 219         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 220       if (args.size() != 1 || !namedArgs.isEmpty()) {
 221         EnParser.LOG.warning("weird qualifier: ");
 222         return false;
 223       }
 224       String qualifier = args.get(0);
 225       appendAndIndexWikiCallback.builder.append("(");
 226       appendAndIndexWikiCallback.dispatch(qualifier, null);
 227       appendAndIndexWikiCallback.builder.append(")");
 228       return true;
 229     }
 230   }
 231
 232   // ------------------------------------------------------------------
 233
 234   static final class EncodingCallback<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 235     @Override
 236     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 237         final Map<String, String> namedArgs,
 238         final T parser,
 239         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 240       //namedArgs.remove("lang");
 241       if (!namedArgs.isEmpty()) {
 242         EnParser.LOG.warning("weird encoding: " + wikiTokenizer.token());
 243         return false;
 244       }
 245       if (args.size() == 0) {
 246         // Things like "{{Jpan}}" exist.
 247         return true;
 248       }
 249
 250       if (name.equals("IPA")) {
 251           appendAndIndexWikiCallback.dispatch("IPA: ", null);
 252       }
 253
 254       for (int i = 0; i < args.size(); ++i) {
 255         if (i > 0) {
 256           appendAndIndexWikiCallback.builder.append(", ");
 257         }
 258         final String arg = args.get(i);
 259 //        if (arg.equals(parser.title)) {
 260 //          parser.titleAppended = true;
 261 //        }
 262         appendAndIndexWikiCallback.dispatch(arg, appendAndIndexWikiCallback.entryTypeName);
 263       }
 264
 265       return true;
 266     }
 267   }
 268
 269   // ------------------------------------------------------------------
 270
 271   static final class Gender<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 272     @Override
 273     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 274         final Map<String, String> namedArgs,
 275         final T parser,
 276         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 277       if (!namedArgs.isEmpty()) {
 278         return false;
 279       }
 280       appendAndIndexWikiCallback.builder.append("{");
 281       appendAndIndexWikiCallback.builder.append(name);
 282       for (int i = 0; i < args.size(); ++i) {
 283         appendAndIndexWikiCallback.builder.append("|").append(args.get(i));
 284       }
 285       appendAndIndexWikiCallback.builder.append("}");
 286       return true;
 287     }
 288   }
 289
 290   // ------------------------------------------------------------------
 291
 292   static final class l_term implements FunctionCallback<EnParser> {
 293     @Override
 294     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 295         final Map<String, String> namedArgs,
 296         final EnParser parser,
 297         final AppendAndIndexWikiCallback<EnParser> appendAndIndexWikiCallback) {
 298
 299       // for {{l}}, lang is arg 0, but not for {{term}}
 300       if (name.equals("term")) {
 301         args.add(0, "");
 302       }
 303
 304       final EntryTypeName entryTypeName;
 305       switch (parser.state) {
 306       case TRANSLATION_LINE: entryTypeName = EntryTypeName.WIKTIONARY_TRANSLATION_OTHER_TEXT; break;
 307       case ENGLISH_DEF_OF_FOREIGN: entryTypeName = EntryTypeName.WIKTIONARY_ENGLISH_DEF_WIKI_LINK; break;
 308       default: throw new IllegalStateException("Invalid enum value: " + parser.state);
 309       }
 310
 311       final String langCode = args.get(0);
 312       final IndexBuilder indexBuilder;
 313       if ("".equals(langCode)) {
 314         indexBuilder = parser.foreignIndexBuilder;
 315       } else if ("en".equals(langCode)) {
 316         indexBuilder = parser.enIndexBuilder;
 317       } else {
 318         indexBuilder = parser.foreignIndexBuilder;
 319       }
 320
 321       String displayText = ListUtil.get(args, 2, "");
 322       if (displayText.equals("")) {
 323         displayText = ListUtil.get(args, 1, null);
 324       }
 325
 326       if (displayText != null) {
 327         appendAndIndexWikiCallback.dispatch(displayText, indexBuilder, entryTypeName);
 328       } else {
 329         EnParser.LOG.warning("no display text: " + wikiTokenizer.token());
 330       }
 331
 332       final String tr = namedArgs.remove("tr");
 333       if (tr != null) {
 334         appendAndIndexWikiCallback.builder.append(" (");
 335         appendAndIndexWikiCallback.dispatch(tr, indexBuilder, EntryTypeName.WIKTIONARY_TRANSLITERATION);
 336         appendAndIndexWikiCallback.builder.append(")");
 337       }
 338
 339       final String gloss = ListUtil.get(args, 3, "");
 340       if (!gloss.equals("")) {
 341         appendAndIndexWikiCallback.builder.append(" (");
 342         appendAndIndexWikiCallback.dispatch(gloss, parser.enIndexBuilder, EntryTypeName.WIKTIONARY_ENGLISH_DEF);
 343         appendAndIndexWikiCallback.builder.append(")");
 344       }
 345
 346       namedArgs.keySet().removeAll(EnParser.USELESS_WIKI_ARGS);
 347       if (!namedArgs.isEmpty()) {
 348         appendAndIndexWikiCallback.builder.append(" {").append(name);
 349         EnParser.appendNamedArgs(namedArgs, appendAndIndexWikiCallback);
 350         appendAndIndexWikiCallback.builder.append("}");
 351       }
 352
 353       return true;
 354     }
 355   }
 356
 357   // ------------------------------------------------------------------
 358
 359   static final class AppendArg0<T extends AbstractWiktionaryParser> implements FunctionCallback<EnParser> {
 360     @Override
 361     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 362         final Map<String, String> namedArgs,
 363         final EnParser parser,
 364         final AppendAndIndexWikiCallback<EnParser> appendAndIndexWikiCallback) {
 365       if (args.size() != 1 || !namedArgs.isEmpty()) {
 366         return false;
 367       }
 368       appendAndIndexWikiCallback.dispatch(args.get(0), EntryTypeName.WIKTIONARY_TRANSLATION_OTHER_TEXT);
 369
 370       final String tr = namedArgs.remove("tr");
 371       if (tr != null) {
 372         appendAndIndexWikiCallback.builder.append(" (");
 373         appendAndIndexWikiCallback.dispatch(tr, EntryTypeName.WIKTIONARY_TRANSLATION_OTHER_TEXT);
 374         appendAndIndexWikiCallback.builder.append(")");
 375         parser.wordForms.add(tr);
 376       }
 377
 378       return true;
 379     }
 380   }
 381
 382   // ------------------------------------------------------------------
 383
 384   static final class italbrac<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 385     @Override
 386     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 387         final Map<String, String> namedArgs,
 388         final T parser,
 389         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 390       if (args.size() != 1 || !namedArgs.isEmpty()) {
 391         return false;
 392       }
 393       appendAndIndexWikiCallback.builder.append("(");
 394       appendAndIndexWikiCallback.dispatch(args.get(0), EntryTypeName.WIKTIONARY_TRANSLATION_OTHER_TEXT);
 395       appendAndIndexWikiCallback.builder.append(")");
 396       return true;
 397     }
 398   }
 399
 400   // ------------------------------------------------------------------
 401
 402   static final class gloss<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 403     @Override
 404     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 405         final Map<String, String> namedArgs,
 406         final T parser,
 407         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 408       if (args.size() != 1 || !namedArgs.isEmpty()) {
 409         return false;
 410       }
 411       appendAndIndexWikiCallback.builder.append("(");
 412       appendAndIndexWikiCallback.dispatch(args.get(0), EntryTypeName.WIKTIONARY_TRANSLATION_OTHER_TEXT);
 413       appendAndIndexWikiCallback.builder.append(")");
 414       return true;
 415     }
 416   }
 417
 418   // ------------------------------------------------------------------
 419
 420   static final class Ignore<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 421     @Override
 422     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 423         final Map<String, String> namedArgs,
 424         final T parser,
 425         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 426       return true;
 427     }
 428   }
 429
 430   // ------------------------------------------------------------------
 431
 432   static final class not_used<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 433     @Override
 434     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 435         final Map<String, String> namedArgs,
 436         final T parser,
 437         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 438       appendAndIndexWikiCallback.builder.append("(not used)");
 439       return true;
 440     }
 441   }
 442
 443
 444   // ------------------------------------------------------------------
 445
 446   static final class AppendName<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 447     @Override
 448     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 449         final Map<String, String> namedArgs,
 450         final T parser,
 451         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 452       if (!args.isEmpty() || !namedArgs.isEmpty()) {
 453         return false;
 454       }
 455       appendAndIndexWikiCallback.builder.append(name);
 456       return true;
 457     }
 458   }
 459
 460   // --------------------------------------------------------------------
 461   // --------------------------------------------------------------------
 462
 463
 464   static final class FormOf implements FunctionCallback<EnParser> {
 465     @Override
 466     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 467         final Map<String, String> namedArgs,
 468         final EnParser parser,
 469         final AppendAndIndexWikiCallback<EnParser> appendAndIndexWikiCallback) {
 470       parser.entryIsFormOfSomething = true;
 471       String formName = name;
 472       if (name.equals("form of")) {
 473         formName = ListUtil.remove(args, 0, null);
 474       }
 475       if (formName == null) {
 476         EnParser.LOG.warning("Missing form name: " + parser.title);
 477         formName = "form of";
 478       }
 479       String baseForm = ListUtil.get(args, 1, "");
 480       if ("".equals(baseForm)) {
 481         baseForm = ListUtil.get(args, 0, null);
 482         ListUtil.remove(args, 1, "");
 483       } else {
 484         ListUtil.remove(args, 0, null);
 485       }
 486       namedArgs.keySet().removeAll(EnParser.USELESS_WIKI_ARGS);
 487
 488       appendAndIndexWikiCallback.builder.append("{");
 489       NAME_AND_ARGS.onWikiFunction(wikiTokenizer, formName, args, namedArgs, parser, appendAndIndexWikiCallback);
 490       appendAndIndexWikiCallback.builder.append("}");
 491       if (baseForm != null && appendAndIndexWikiCallback.indexedEntry != null) {
 492         parser.foreignIndexBuilder.addEntryWithString(appendAndIndexWikiCallback.indexedEntry, baseForm, EntryTypeName.WIKTIONARY_BASE_FORM_MULTI);
 493       } else {
 494         // null baseForm happens in Danish.
 495         EnParser.LOG.warning("Null baseform: " + parser.title);
 496       }
 497       return true;
 498     }
 499   }
 500
 501   static final EnFunctionCallbacks.FormOf FORM_OF = new FormOf();
 502
 503
 504   // --------------------------------------------------------------------
 505   // --------------------------------------------------------------------
 506
 507   static final class wikipedia<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 508     @Override
 509     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 510         final Map<String, String> namedArgs,
 511         final T parser,
 512         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 513       namedArgs.remove("lang");
 514       if (args.size() > 1 || !namedArgs.isEmpty()) {
 515         // Unindexed!
 516         return false;
 517       } else if (args.size() == 1) {
 518         return false;
 519       } else {
 520         return true;
 521       }
 522     }
 523   }
 524
 525   static final class InflOrHead implements FunctionCallback<EnParser> {
 526     @Override
 527     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 528         final Map<String, String> namedArgs,
 529         final EnParser parser,
 530         final AppendAndIndexWikiCallback<EnParser> appendAndIndexWikiCallback) {
 531       // See: http://en.wiktionary.org/wiki/Template:infl
 532       // TODO: Actually these functions should start a new WordPOS:
 533       // See: http://en.wiktionary.org/wiki/quattro
 534       final String langCode = ListUtil.get(args, 0);
 535       String head = namedArgs.remove("head");
 536       if (head == null) {
 537         head = namedArgs.remove("title"); // Bug
 538       }
 539       if (head == null) {
 540         head = parser.title;
 541       }
 542
 543       namedArgs.keySet().removeAll(EnParser.USELESS_WIKI_ARGS);
 544
 545       final String tr = namedArgs.remove("tr");
 546       String g = namedArgs.remove("g");
 547       if (g == null) {
 548         g = namedArgs.remove("gender");
 549       }
 550       final String g2 = namedArgs.remove("g2");
 551       final String g3 = namedArgs.remove("g3");
 552
 553       // We might have already taken care of this in a generic way...
 554       if (!parser.titleAppended) {
 555         appendAndIndexWikiCallback.dispatch(head, EntryTypeName.WIKTIONARY_TITLE_MULTI);
 556         parser.titleAppended = true;
 557       }
 558
 559       if (g != null) {
 560         appendAndIndexWikiCallback.builder.append(" {").append(g);
 561         if (g2 != null) {
 562           appendAndIndexWikiCallback.builder.append("|").append(g2);
 563         }
 564         if (g3 != null) {
 565           appendAndIndexWikiCallback.builder.append("|").append(g3);
 566         }
 567         appendAndIndexWikiCallback.builder.append("}");
 568       }
 569
 570       if (tr != null) {
 571         appendAndIndexWikiCallback.builder.append(" (");
 572         appendAndIndexWikiCallback.dispatch(tr, EntryTypeName.WIKTIONARY_TITLE_MULTI);
 573         appendAndIndexWikiCallback.builder.append(")");
 574         parser.wordForms.add(tr);
 575       }
 576
 577       final String pos = ListUtil.get(args, 1);
 578       if (pos != null) {
 579         appendAndIndexWikiCallback.builder.append(" (").append(pos).append(")");
 580       }
 581       for (int i = 2; i < args.size(); i += 2) {
 582         final String inflName = ListUtil.get(args, i);
 583         final String inflValue = ListUtil.get(args, i + 1);
 584         appendAndIndexWikiCallback.builder.append(", ");
 585         appendAndIndexWikiCallback.dispatch(inflName, null, null);
 586         if (inflValue != null && inflValue.length() > 0) {
 587           appendAndIndexWikiCallback.builder.append(": ");
 588           appendAndIndexWikiCallback.dispatch(inflValue, null, null);
 589           parser.wordForms.add(inflValue);
 590         }
 591       }
 592       for (final String key : namedArgs.keySet()) {
 593         final String value = WikiTokenizer.toPlainText(namedArgs.get(key));
 594         appendAndIndexWikiCallback.builder.append(" ");
 595         appendAndIndexWikiCallback.dispatch(key, null, null);
 596         appendAndIndexWikiCallback.builder.append("=");
 597         appendAndIndexWikiCallback.dispatch(value, null, null);
 598         parser.wordForms.add(value);
 599       }
 600       return true;
 601     }
 602   }
 603
 604
 605   static {
 606     DEFAULT.put("it-noun", new it_noun());
 607   }
 608   static final class it_noun implements FunctionCallback<EnParser> {
 609     @Override
 610     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 611         final Map<String, String> namedArgs,
 612         final EnParser parser,
 613         final AppendAndIndexWikiCallback<EnParser> appendAndIndexWikiCallback) {
 614       parser.titleAppended = true;
 615       final String base = ListUtil.get(args, 0);
 616       final String gender = ListUtil.get(args, 1);
 617       final String singular = base + ListUtil.get(args, 2, null);
 618       final String plural = base + ListUtil.get(args, 3, null);
 619       appendAndIndexWikiCallback.builder.append(" ");
 620       appendAndIndexWikiCallback.dispatch(singular, null, null);
 621       appendAndIndexWikiCallback.builder.append(" {").append(gender).append("}, ");
 622       appendAndIndexWikiCallback.dispatch(plural, null, null);
 623       appendAndIndexWikiCallback.builder.append(" {pl}");
 624       final String f = namedArgs.remove("f");
 625       if (f != null) {
 626           appendAndIndexWikiCallback.builder.append(", ");
 627           appendAndIndexWikiCallback.dispatch(f, null, null);
 628           appendAndIndexWikiCallback.builder.append(" {f}");
 629       }
 630       final String m = namedArgs.remove("f");
 631       if (m != null) {
 632           appendAndIndexWikiCallback.builder.append(", ");
 633           appendAndIndexWikiCallback.dispatch(m, null, null);
 634           appendAndIndexWikiCallback.builder.append(" {m}");
 635       }
 636       parser.wordForms.add(singular);
 637       parser.wordForms.add(plural);
 638       if (!namedArgs.isEmpty() || args.size() > 4) {
 639         EnParser.LOG.warning("Invalid it-noun: " + wikiTokenizer.token());
 640       }
 641       return true;
 642     }
 643   }
 644
 645   static {
 646     DEFAULT.put("it-proper noun", new it_proper_noun<EnParser>());
 647   }
 648   static final class it_proper_noun<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 649     @Override
 650     public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 651         final Map<String, String> namedArgs,
 652         final T parser,
 653         final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 654       return false;
 655     }
 656   }
 657
 658   // -----------------------------------------------------------------------
 659   // Italian stuff
 660   // -----------------------------------------------------------------------
 661
 662   static void passThroughOrFillIn(final Map<String,String> namedArgs, final String key, final String fillIn, final boolean quoteToEmpty) {
 663       final String value = namedArgs.get(key);
 664       if (quoteToEmpty && "''".equals(value)) {
 665           namedArgs.put(key, "");
 666           return;
 667       }
 668       if (value == null || value.equals("")) {
 669           namedArgs.put(key, fillIn);
 670       }
 671   }
 672
 673   static final List<String> it_number_s_p = Arrays.asList("s", "p");
 674   static final List<String> it_person_1_2_3 = Arrays.asList("1", "2", "3");
 675   static final List<String> it_reflexive_pronouns = Arrays.asList("mi ", "ti ", "si ", "ci ", "vi ", "si ");
 676   static final List<String> it_empty = Arrays.asList("", "", "", "", "", "");
 677   static void it_conj_passMood(final Map<String,String> namedArgs, final String moodName, final boolean quoteToEmpty, final String root, final List<String> suffixes) {
 678       assert suffixes.size() == 6;
 679       int i = 0;
 680       for (final String number : it_number_s_p) {
 681           for (final String person : it_person_1_2_3) {
 682               passThroughOrFillIn(namedArgs, String.format("%s%s%s", moodName, person, number), root + suffixes.get(i), quoteToEmpty);
 683               ++i;
 684           }
 685       }
 686   }
 687
 688   private static <T extends AbstractWiktionaryParser> void outputKeyVariations(AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback,
 689         final StringBuilder builder, final String keyBase, Map<String, String> namedArgs, boolean isForm) {
 690     for (int suffix = 0; suffix <= 4; ++suffix) {
 691         final String key = suffix == 0 ? keyBase : keyBase + suffix;
 692         final String val = namedArgs.remove(key);
 693         if (val != null) {
 694             if (suffix > 0) {
 695                 builder.append(", ");
 696             }
 697             appendAndIndexWikiCallback.dispatch(val, null);
 698             if (isForm) {
 699                 appendAndIndexWikiCallback.parser.addLinkToCurrentEntry(val, EntryTypeName.WIKTIONARY_INFLECTED_FORM_MULTI);
 700             }
 701         }
 702     }
 703   }
 704
 705 static final class it_conj_are<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 706     final it_conj<T> dest;
 707     it_conj_are(it_conj<T> dest) {
 708       this.dest = dest;
 709     }
 710     @Override
 711       public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 712           final Map<String, String> namedArgs,
 713           final T parser,
 714           final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 715         final String h = name.equals("it-conj-care") || name.equals("it-conj-carsi") ? "h" : "";
 716         final String i = name.equals("it-conj-ciare") || name.equals("it-conj-ciarsi") ? "i" : "";
 717         final String i2 = name.equals("it-conj-iare") || name.equals("it-conj-iarsi") ? "" : "i";
 718         final boolean si = name.equals("it-conj-arsi") || name.equals("it-conj-iarsi") || name.equals("it-conj-iarsi-b") || name.equals("it-conj-carsi") || name.equals("it-conj-ciarsi");
 719         final String root = args.get(0);
 720         passThroughOrFillIn(namedArgs, "inf", root + i + (si ? "arsi" : "are"), false);
 721         namedArgs.put("aux", ListUtil.get(args, 1, ""));
 722         passThroughOrFillIn(namedArgs, "ger", root + i + "ando" + (si ? "si" : ""), true);
 723         passThroughOrFillIn(namedArgs, "presp", root + i + "ante"+ (si ? "si" : ""), true);
 724         passThroughOrFillIn(namedArgs, "pastp", root + i + "ato", true);
 725         if (si) {
 726             passThroughOrFillIn(namedArgs, "pastp2", root + i + "atosi", true);
 727         }
 728         final String i2b = (name.equals("it-conj-iare-b") || name.equals("it-conj-iarsi-b")) ? "" : i2;
 729
 730         it_conj_passMood(namedArgs, "pres", false, root, Arrays.asList(i + "o", h + i2, i + "a", h + i2 + "amo", i + "ate", i + "ano"));
 731         it_conj_passMood(namedArgs, "imperf", false, root, Arrays.asList(i + "avo", i + "avi", i + "ava", i + "avamo", i + "avate", i + "avano"));
 732         it_conj_passMood(namedArgs, "prem", false, root, Arrays.asList(i + "ai", i + "asti", i + "ò", i + "ammo", i + "aste", i + "arono"));
 733         it_conj_passMood(namedArgs, "fut", true, root, Arrays.asList(h + "erò", h + "erai", h + "erà", h + "eremo", h + "erete", h + "eranno"));
 734         it_conj_passMood(namedArgs, "cond", true, root, Arrays.asList(h + "erei", h + "eresti", h + "erebbe", h + "eremmo", h + "ereste", h + "erebbero"));
 735
 736         passThroughOrFillIn(namedArgs, "sub123s", root + h + i2, false);
 737         passThroughOrFillIn(namedArgs, "sub1p", root + h + i2b + "amo", false);
 738         passThroughOrFillIn(namedArgs, "sub2p", root + h + i2b + "ate", false);
 739         passThroughOrFillIn(namedArgs, "sub3p", root + h + i2 + "no", false);
 740
 741         passThroughOrFillIn(namedArgs, "impsub12s", root + i + "assi", false);
 742         passThroughOrFillIn(namedArgs, "impsub3s", root + i + "asse", false);
 743         passThroughOrFillIn(namedArgs, "impsub1p", root + i + "assimo", false);
 744         passThroughOrFillIn(namedArgs, "impsub2p", root + i + "aste", false);
 745         passThroughOrFillIn(namedArgs, "impsub3p", root + i + "assero", false);
 746
 747         passThroughOrFillIn(namedArgs, "imp2s", root + i + "a" + (si ? "ti" : ""), true);
 748         passThroughOrFillIn(namedArgs, "imp3s", (si ? "si " : "") + root + h + i2, true);
 749         passThroughOrFillIn(namedArgs, "imp1p", root + h + i2b + "amo" + (si ? "ci" : ""), true);
 750         passThroughOrFillIn(namedArgs, "imp2p", root + i + "ate" + (si ? "vi" : ""), true);
 751         passThroughOrFillIn(namedArgs, "imp3p", (si ? "si " : "") + root + h + i2 + "no", true);
 752
 753         return dest.onWikiFunction(wikiTokenizer, name, args, namedArgs, parser, appendAndIndexWikiCallback);
 754       }
 755     }
 756
 757   static final class it_conj_ire<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 758     final it_conj<T> dest;
 759     it_conj_ire(it_conj<T> dest) {
 760       this.dest = dest;
 761     }
 762     @Override
 763       public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 764           final Map<String, String> namedArgs,
 765           final T parser,
 766           final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 767         final String root = args.get(0);
 768         final String i = name.equals("it-conj-cire") || name.equals("it-conj-cirsi") ? "i" : "";
 769         final boolean si = name.equals("it-conj-irsi") || name.equals("it-conj-irsi-b") || name.equals("it-conj-cirsi");
 770
 771         passThroughOrFillIn(namedArgs, "inf", root + (si ? "irsi" : "ire"), false);
 772         namedArgs.put("aux", ListUtil.get(args, 1, ""));
 773         passThroughOrFillIn(namedArgs, "ger", root + "endo" + (si ? "si" : ""), true);
 774         passThroughOrFillIn(namedArgs, "presp", root + "ente" + (si ? "si" : ""), true);
 775         passThroughOrFillIn(namedArgs, "pastp", root + "ito", true);
 776         if (si) {
 777             passThroughOrFillIn(namedArgs, "pastp2", root + "itosi", true);
 778         }
 779         if (!name.endsWith("-b")) {
 780             it_conj_passMood(namedArgs, "pres", false, root, Arrays.asList(i + "o", "i", "e", "iamo", "ite", i + "ono"));
 781         } else {
 782             it_conj_passMood(namedArgs, "pres", false, root, Arrays.asList("isco", "isci", "isce", "iamo", "ite", "iscono"));
 783         }
 784         it_conj_passMood(namedArgs, "imperf", false, root, Arrays.asList("ivo", "ivi", "iva", "ivamo", "ivate", "ivano"));
 785         it_conj_passMood(namedArgs, "prem", false, root, Arrays.asList("ii", "isti", "ì", "immo", "iste", "irono"));
 786         // Regular past historic synonyms:
 787         passThroughOrFillIn(namedArgs, "prem3s2", root + "é", true);
 788         passThroughOrFillIn(namedArgs, "prem3p2", root + "erono", true);
 789         it_conj_passMood(namedArgs, "fut", true, root, Arrays.asList("irò", "irai", "irà", "iremo", "irete", "iranno"));
 790         it_conj_passMood(namedArgs, "cond", true, root, Arrays.asList("irei", "iresti", "irebbe", "iremmo", "ireste", "irebbero"));
 791
 792         if (!name.endsWith("-b")) {
 793             passThroughOrFillIn(namedArgs, "sub123s", root + i + "a", false);
 794             passThroughOrFillIn(namedArgs, "sub3p", root + i + "ano", false);
 795         } else {
 796             passThroughOrFillIn(namedArgs, "sub123s", root + "isca", false);
 797             passThroughOrFillIn(namedArgs, "sub3p", root + "iscano", false);
 798         }
 799         passThroughOrFillIn(namedArgs, "sub1p", root + "iamo", false);
 800         passThroughOrFillIn(namedArgs, "sub2p", root + "iate", false);
 801
 802         passThroughOrFillIn(namedArgs, "impsub12s", root + "issi", false);
 803         passThroughOrFillIn(namedArgs, "impsub3s", root + "isse", false);
 804         passThroughOrFillIn(namedArgs, "impsub1p", root + "issimo", false);
 805         passThroughOrFillIn(namedArgs, "impsub2p", root + "iste", false);
 806         passThroughOrFillIn(namedArgs, "impsub3p", root + "issero", false);
 807
 808         if (!name.endsWith("-b")) {
 809             passThroughOrFillIn(namedArgs, "imp2s", root + "i" + (si ? "ti" : ""), true);
 810             passThroughOrFillIn(namedArgs, "imp3s", (si ? "si " : "") + root + i + "a", true);
 811             passThroughOrFillIn(namedArgs, "imp3p", (si ? "si " : "") + root + i + "ano", true);
 812         } else {
 813             passThroughOrFillIn(namedArgs, "imp2s", root + "isci" + (si ? "ti" : ""), true);
 814             passThroughOrFillIn(namedArgs, "imp3s", (si ? "si " : "") + root + "isca", true);
 815             passThroughOrFillIn(namedArgs, "imp3p", (si ? "si " : "") + root + "iscano", true);
 816         }
 817         passThroughOrFillIn(namedArgs, "imp1p", root + "iamo" + (si ? "ci" : ""), true);
 818         passThroughOrFillIn(namedArgs, "imp2p", root + "ite" + (si ? "vi" : ""), true);
 819
 820         return dest.onWikiFunction(wikiTokenizer, name, args, namedArgs, parser, appendAndIndexWikiCallback);
 821       }
 822     }
 823
 824
 825   static final class it_conj_ere<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 826       final it_conj<T> dest;
 827       it_conj_ere(it_conj<T> dest) {
 828         this.dest = dest;
 829       }
 830       @Override
 831         public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 832             final Map<String, String> namedArgs,
 833             final T parser,
 834             final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 835           final String root = args.get(0);
 836           final boolean si = name.equals("it-conj-ersi");
 837
 838           passThroughOrFillIn(namedArgs, "inf", root + (si ? "ersi" : "ere"), false);
 839           namedArgs.put("aux", ListUtil.get(args, 1, ""));
 840           passThroughOrFillIn(namedArgs, "ger", root + "endo" + (si ? "si" : ""), true);
 841           passThroughOrFillIn(namedArgs, "presp", root + "ente" + (si ? "si" : ""), true);
 842           passThroughOrFillIn(namedArgs, "pastp", root + "uto", true);
 843           if (si) {
 844               passThroughOrFillIn(namedArgs, "pastp2", root + "utosi", true);
 845           }
 846           it_conj_passMood(namedArgs, "pres", false, root, Arrays.asList("o", "i", "e", "iamo", "ete", "ono"));
 847           it_conj_passMood(namedArgs, "imperf", false, root, Arrays.asList("evo", "evi", "eva", "evamo", "evate", "evano"));
 848           it_conj_passMood(namedArgs, "prem", false, root, Arrays.asList("ei", "esti", "ette", "emmo", "este", "ettero"));
 849           // Regular past historic synonyms:
 850           passThroughOrFillIn(namedArgs, "prem3s2", root + "é", true);
 851           passThroughOrFillIn(namedArgs, "prem3p2", root + "erono", true);
 852           it_conj_passMood(namedArgs, "fut", true, root, Arrays.asList("erò", "erai", "erà", "eremo", "erete", "eranno"));
 853           it_conj_passMood(namedArgs, "cond", true, root, Arrays.asList("erei", "eresti", "erebbe", "eremmo", "ereste", "erebbero"));
 854
 855           passThroughOrFillIn(namedArgs, "sub123s", root + "a", false);
 856           passThroughOrFillIn(namedArgs, "sub1p", root + "iamo", false);
 857           passThroughOrFillIn(namedArgs, "sub2p", root + "iate", false);
 858           passThroughOrFillIn(namedArgs, "sub3p", root + "ano", false);
 859
 860           passThroughOrFillIn(namedArgs, "impsub12s", root + "essi", false);
 861           passThroughOrFillIn(namedArgs, "impsub3s", root + "esse", false);
 862           passThroughOrFillIn(namedArgs, "impsub1p", root + "essimo", false);
 863           passThroughOrFillIn(namedArgs, "impsub2p", root + "este", false);
 864           passThroughOrFillIn(namedArgs, "impsub3p", root + "essero", false);
 865
 866           passThroughOrFillIn(namedArgs, "imp2s", root + "i" + (si ? "ti" : ""), true);
 867           passThroughOrFillIn(namedArgs, "imp3s", (si ? "si " : "") + root + "a", true);
 868           passThroughOrFillIn(namedArgs, "imp1p", root + "iamo" + (si ? "ci" : ""), true);
 869           passThroughOrFillIn(namedArgs, "imp2p", root + "ete" + (si ? "vi" : ""), true);
 870           passThroughOrFillIn(namedArgs, "imp3p", (si ? "si " : "") + root + "ano", true);
 871
 872           return dest.onWikiFunction(wikiTokenizer, name, args, namedArgs, parser, appendAndIndexWikiCallback);
 873         }
 874       }
 875
 876   static final class it_conj_urre<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 877       final it_conj<T> dest;
 878       it_conj_urre(it_conj<T> dest) {
 879         this.dest = dest;
 880       }
 881       @Override
 882         public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 883             final Map<String, String> namedArgs,
 884             final T parser,
 885             final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 886           final String root = args.get(0);
 887           final boolean si = name.equals("it-conj-ursi");
 888
 889           passThroughOrFillIn(namedArgs, "inf", root + (si ? "ursi" : "urre"), false);
 890           namedArgs.put("aux", ListUtil.get(args, 1, ""));
 891           passThroughOrFillIn(namedArgs, "ger", root + "ucendo" + (si ? "si" : ""), true);
 892           passThroughOrFillIn(namedArgs, "presp", root + "ucente" + (si ? "si" : ""), true);
 893           passThroughOrFillIn(namedArgs, "pastp", root + "otto", true);
 894           if (si) {
 895               passThroughOrFillIn(namedArgs, "pastp2", root + "ottosi", true);
 896           }
 897           it_conj_passMood(namedArgs, "pres", false, root, Arrays.asList("uco", "uci", "uce", "uciamo", "ucete", "ucono"));
 898           it_conj_passMood(namedArgs, "imperf", false, root, Arrays.asList("ucevo", "ucevi", "uceva", "ucevamo", "ucevate", "ucevano"));
 899           it_conj_passMood(namedArgs, "prem", false, root, Arrays.asList("ussi", "ucesti", "usse", "ucemmo", "uceste", "ussero"));
 900           it_conj_passMood(namedArgs, "fut", true, root, Arrays.asList("urrò", "urrai", "urrà", "urremo", "urrete", "urranno"));
 901           it_conj_passMood(namedArgs, "cond", true, root, Arrays.asList("urrei", "urresti", "urrebbe", "urremmo", "urreste", "urrebbero"));
 902
 903           passThroughOrFillIn(namedArgs, "sub123s", root + "uca", false);
 904           passThroughOrFillIn(namedArgs, "sub1p", root + "uciamo", false);
 905           passThroughOrFillIn(namedArgs, "sub2p", root + "uciate", false);
 906           passThroughOrFillIn(namedArgs, "sub3p", root + "ucano", false);
 907
 908           passThroughOrFillIn(namedArgs, "impsub12s", root + "ucessi", false);
 909           passThroughOrFillIn(namedArgs, "impsub3s", root + "ucesse", false);
 910           passThroughOrFillIn(namedArgs, "impsub1p", root + "ucessimo", false);
 911           passThroughOrFillIn(namedArgs, "impsub2p", root + "uceste", false);
 912           passThroughOrFillIn(namedArgs, "impsub3p", root + "ucessero", false);
 913
 914           passThroughOrFillIn(namedArgs, "imp2s", root + "uci" + (si ? "ti" : ""), true);
 915           passThroughOrFillIn(namedArgs, "imp3s", (si ? "si" : "") + root + "uca", true);
 916           passThroughOrFillIn(namedArgs, "imp1p", root + "uciamo" + (si ? "ci" : ""), true);
 917           passThroughOrFillIn(namedArgs, "imp2p", root + "ucete" + (si ? "vi" : ""), true);
 918           passThroughOrFillIn(namedArgs, "imp3p", (si ? "si" : "") + root + "ucano", true);
 919
 920           return dest.onWikiFunction(wikiTokenizer, name, args, namedArgs, parser, appendAndIndexWikiCallback);
 921         }
 922       }
 923
 924   static final class it_conj_fare<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
 925       final it_conj<T> dest;
 926       it_conj_fare(it_conj<T> dest) {
 927         this.dest = dest;
 928       }
 929       @Override
 930         public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
 931             final Map<String, String> namedArgs,
 932             final T parser,
 933             final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
 934           final String root = args.get(0);
 935           passThroughOrFillIn(namedArgs, "inf", root + "fare", false);
 936           namedArgs.put("aux", ListUtil.get(args, 1, ""));
 937           passThroughOrFillIn(namedArgs, "ger", root + "facendo", true);
 938           passThroughOrFillIn(namedArgs, "presp", root + "facente", true);
 939           passThroughOrFillIn(namedArgs, "pastp", root + "fatto", true);
 940           it_conj_passMood(namedArgs, "pres", false, root, Arrays.asList("faccio", "fai", "fà", "facciamo", "fate", "fanno"));
 941           passThroughOrFillIn(namedArgs, "pres1s2", root + "fò", true);
 942           it_conj_passMood(namedArgs, "imperf", false, root, Arrays.asList("facevo", "facevi", "faceva", "facevamo", "facevate", "facevano"));
 943           it_conj_passMood(namedArgs, "prem", false, root, Arrays.asList("feci", "facesti", "fece", "facemmo", "faceste", "fecero"));
 944           it_conj_passMood(namedArgs, "fut", true, root, Arrays.asList("farò", "farai", "farà", "faremo", "farete", "faranno"));
 945           it_conj_passMood(namedArgs, "cond", true, root, Arrays.asList("farei", "faresti", "farebbe", "faremmo", "fareste", "farebbero"));
 946
 947           passThroughOrFillIn(namedArgs, "sub123s", root + "faccia", false);
 948           passThroughOrFillIn(namedArgs, "sub1p", root + "facciamo", false);
 949           passThroughOrFillIn(namedArgs, "sub2p", root + "facciate", false);
 950           passThroughOrFillIn(namedArgs, "sub3p", root + "facciano", false);
 951
 952           passThroughOrFillIn(namedArgs, "impsub12s", root + "facessi", false);
 953           passThroughOrFillIn(namedArgs, "impsub3s", root + "facesse", false);
 954           passThroughOrFillIn(namedArgs, "impsub1p", root + "facessimo", false);
 955           passThroughOrFillIn(namedArgs, "impsub2p", root + "faceste", false);
 956           passThroughOrFillIn(namedArgs, "impsub3p", root + "facessero", false);
 957
 958           passThroughOrFillIn(namedArgs, "imp2s", root + "fa", true);
 959           passThroughOrFillIn(namedArgs, "imp3s", root + "faccia", true);
 960           passThroughOrFillIn(namedArgs, "imp1p", root + "facciamo", true);
 961           passThroughOrFillIn(namedArgs, "imp2p", root + "fate", true);
 962           passThroughOrFillIn(namedArgs, "imp3p", root + "facciano", true);
 963
 964           return dest.onWikiFunction(wikiTokenizer, name, args, namedArgs, parser, appendAndIndexWikiCallback);
 965         }
 966       }
 967
 968   static final Map<String,String> it_indicativePronouns = new LinkedHashMap<String, String>();
 969   static {
 970       it_indicativePronouns.put("1s", "io");
 971       it_indicativePronouns.put("2s", "tu");
 972       it_indicativePronouns.put("3s", "lui/lei");
 973       it_indicativePronouns.put("1p", "noi");
 974       it_indicativePronouns.put("2p", "voi");
 975       it_indicativePronouns.put("3p", "essi/esse");
 976   }
 977
 978   static final Map<String,String> it_subjunctivePronouns = new LinkedHashMap<String, String>();
 979   static {
 980       it_subjunctivePronouns.put("1s", "che io");
 981       it_subjunctivePronouns.put("2s", "che tu");
 982       it_subjunctivePronouns.put("3s", "che lui/lei");
 983       it_subjunctivePronouns.put("1p", "che noi");
 984       it_subjunctivePronouns.put("2p", "che voi");
 985       it_subjunctivePronouns.put("3p", "che essi/esse");
 986   }
 987
 988   static final Map<String,String> it_imperativePronouns = new LinkedHashMap<String, String>();
 989   static {
 990       it_imperativePronouns.put("1s", "-");
 991       it_imperativePronouns.put("2s", "tu");
 992       it_imperativePronouns.put("3s", "lui/lei");
 993       it_imperativePronouns.put("1p", "noi");
 994       it_imperativePronouns.put("2p", "voi");
 995       it_imperativePronouns.put("3p", "essi/esse");
 996   }
 997
 998
 999   static final class it_conj<T extends AbstractWiktionaryParser> implements FunctionCallback<T> {
1000       @Override
1001       public boolean onWikiFunction(final WikiTokenizer wikiTokenizer, final String name, final List<String> args,
1002           final Map<String, String> namedArgs,
1003           final T parser,
1004           final AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback) {
1005
1006         final StringBuilder builder = appendAndIndexWikiCallback.builder;
1007
1008         final String inf = namedArgs.get("inf");
1009
1010         // TODO: center everything horizontally.
1011         builder.append("<table style=\"background:#F0F0F0\">");
1012
1013         builder.append("<tr>");
1014         builder.append("<th colspan=\"1\" style=\"background:#e2e4c0\">infinito</th>");
1015         builder.append("<td colspan=\"1\">");
1016         appendAndIndexWikiCallback.dispatch(MapUtil.safeRemove(namedArgs, "inf", "-"), null);
1017         builder.append("</td>");
1018         builder.append("</tr>\n");
1019
1020         builder.append("<tr>");
1021         builder.append("<th colspan=\"1\" style=\"background:#e2e4c0\">verbo ausiliare</th>");
1022         builder.append("<td colspan=\"1\">");
1023         appendAndIndexWikiCallback.dispatch(MapUtil.safeRemove(namedArgs, "aux", "-"), null);
1024         builder.append("</td>");
1025         builder.append("<th colspan=\"1\" style=\"background:#e2e4c0\">gerundio</th>");
1026         builder.append("<td colspan=\"1\">");
1027         outputKeyVariations(appendAndIndexWikiCallback, builder, "ger", namedArgs, true);
1028         builder.append("</td>");
1029         builder.append("</tr>\n");
1030
1031         builder.append("<tr>");
1032         builder.append("<th colspan=\"1\" style=\"background:#e2e4c0\">participio presente</th>");
1033         builder.append("<td colspan=\"1\">");
1034         outputKeyVariations(appendAndIndexWikiCallback, builder, "presp", namedArgs, true);
1035         builder.append("</td>");
1036         builder.append("<th colspan=\"1\" style=\"background:#e2e4c0\">participio passato</th>");
1037         builder.append("<td colspan=\"1\">");
1038         outputKeyVariations(appendAndIndexWikiCallback, builder, "pastp", namedArgs, true);
1039         builder.append("</td>");
1040         builder.append("</tr>\n");
1041
1042         final List<String> prefixes = (inf != null && inf.endsWith("si")) ? it_reflexive_pronouns : it_empty;
1043
1044         String style = " style=\"background:#c0cfe4\"";
1045         outputDataRow(appendAndIndexWikiCallback, style, "indicativo", style, "th", "", new LinkedHashMap<String, String>(it_indicativePronouns), it_empty, false);
1046         outputDataRow(appendAndIndexWikiCallback, style, "presente", "", "td", "pres", namedArgs, prefixes, true);
1047         outputDataRow(appendAndIndexWikiCallback, style, "imperfetto", "", "td", "imperf", namedArgs, prefixes, true);
1048         outputDataRow(appendAndIndexWikiCallback, style, "passato remoto", "", "td", "prem", namedArgs, prefixes, true);
1049         outputDataRow(appendAndIndexWikiCallback, style, "futuro", "", "td", "fut", namedArgs, prefixes, true);
1050
1051         style = " style=\"background:#c0d8e4\"";
1052         outputDataRow(appendAndIndexWikiCallback, style, "condizionale", style, "th", "", new LinkedHashMap<String, String>(it_indicativePronouns), it_empty, false);
1053         outputDataRow(appendAndIndexWikiCallback, style, "presente", "", "td", "cond", namedArgs, prefixes, true);
1054
1055         style = " style=\"background:#c0e4c0\"";
1056         outputDataRow(appendAndIndexWikiCallback, style, "congiuntivo", style, "th", "", new LinkedHashMap<String, String>(it_subjunctivePronouns), it_empty, false);
1057         namedArgs.put("sub3s2", namedArgs.remove("sub3s"));
1058         namedArgs.put("sub1s", namedArgs.get("sub123s"));
1059         namedArgs.put("sub2s", namedArgs.get("sub123s"));
1060         namedArgs.put("sub3s", namedArgs.remove("sub123s"));
1061         namedArgs.put("sub1s2", namedArgs.get("sub123s2"));
1062         namedArgs.put("sub2s2", namedArgs.get("sub123s2"));
1063         namedArgs.put("sub3s2", namedArgs.remove("sub123s2"));
1064         outputDataRow(appendAndIndexWikiCallback, style, "presente", "", "td", "sub", namedArgs, prefixes, true);
1065         namedArgs.put("impsub1s", namedArgs.get("impsub12s"));
1066         namedArgs.put("impsub2s", namedArgs.remove("impsub12s"));
1067         namedArgs.put("impsub1s2", namedArgs.get("impsub12s2"));
1068         namedArgs.put("impsub2s2", namedArgs.remove("impsub12s2"));
1069         outputDataRow(appendAndIndexWikiCallback, style, "imperfetto", "", "td", "impsub", namedArgs, prefixes, true);
1070
1071         style = " style=\"background:#e4d4c0\"";
1072         outputDataRow(appendAndIndexWikiCallback, style, "imperativo", style, "th", "", new LinkedHashMap<String, String>(it_imperativePronouns), it_empty, false);
1073         outputDataRow(appendAndIndexWikiCallback, style, "", "", "td", "imp", namedArgs, it_empty, false);  // these are attached to the stem.
1074
1075         builder.append("</table>\n");
1076
1077         if (!namedArgs.isEmpty()) {
1078             System.err.println("NON-EMPTY namedArgs: " + namedArgs);
1079             if ("muovesse".equals(namedArgs.get("impsib3s2"))) {
1080                 return false;
1081             }
1082             if ("percuotesse".equals(namedArgs.get("impsib3s2"))) {
1083                 return false;
1084             }
1085             // Too many to deal with:
1086             //assert false;
1087             return false;
1088         }
1089
1090         return true;
1091       }
1092
1093         private void outputDataRow(AppendAndIndexWikiCallback<T> appendAndIndexWikiCallback,
1094                 String col1Style, String headerName,
1095                 String col2Style, final String type2,
1096                 String moodName, Map<String, String> namedArgs, final List<String> prefixes, final boolean isForm) {
1097             final StringBuilder builder = appendAndIndexWikiCallback.builder;
1098             builder.append("<tr>");
1099             builder.append("<th colspan=\"1\"").append(col1Style).append(">").append(headerName).append("</th>");
1100             int i = 0;
1101             for (final String number : it_number_s_p) {
1102                 for (final String person : it_person_1_2_3) {
1103                     // Output <td> or <th>
1104                     builder.append("<").append(type2).append("").append(col2Style).append(">");
1105                     final String keyBase = String.format("%s%s%s", moodName, person, number);
1106                     appendAndIndexWikiCallback.dispatch(prefixes.get(i++), null);
1107                     outputKeyVariations(appendAndIndexWikiCallback, builder, keyBase, namedArgs, isForm);
1108                     // Output <td> or <th>
1109                     builder.append("</").append(type2).append(">");
1110                 }
1111             }
1112             builder.append("</tr>\n");
1113         }
1114     }
1115 }