src/ltj-jfmglue.lua

   1 --
   2 -- luatexja/ltj-jfmglue.lua
   3 --
   4 luatexbase.provides_module({
   5   name = 'luatexja.jfmglue',
   6   date = '2014/02/02',
   7   description = 'Insertion process of JFM glues and kanjiskip',
   8 })
   9 module('luatexja.jfmglue', package.seeall)
  10 local err, warn, info, log = luatexbase .errwarinf(_NAME)
  11
  12 luatexja.load_module('stack');     local ltjs = luatexja.stack
  13 luatexja.load_module('jfont');     local ltjf = luatexja.jfont
  14 luatexja.load_module('direction'); local ltjd = luatexja.direction
  15 local pairs = pairs
  16
  17 local Dnode = node.direct or node
  18
  19 local nullfunc = function(n) return n end
  20 local to_node = (Dnode ~= node) and Dnode.tonode or nullfunc
  21 local to_direct = (Dnode ~= node) and Dnode.todirect or nullfunc
  22
  23 local setfield = (Dnode ~= node) and Dnode.setfield or function(n, i, c) n[i] = c end
  24 local getfield = (Dnode ~= node) and Dnode.getfield or function(n, i) return n[i] end
  25 local getid = (Dnode ~= node) and Dnode.getid or function(n) return n.id end
  26 local getfont = (Dnode ~= node) and Dnode.getfont or function(n) return n.font end
  27 local getlist = (Dnode ~= node) and Dnode.getlist or function(n) return n.head end
  28 local getchar = (Dnode ~= node) and Dnode.getchar or function(n) return n.char end
  29 local getsubtype = (Dnode ~= node) and Dnode.getsubtype or function(n) return n.subtype end
  30
  31 local has_attr = Dnode.has_attribute
  32 local set_attr = Dnode.set_attribute
  33 local insert_before = Dnode.insert_before
  34 local insert_after = Dnode.insert_after
  35 local node_next = (Dnode ~= node) and Dnode.getnext or node.next
  36 local round = tex.round
  37 local ltjd_make_dir_node = ltjd.make_dir_node
  38 local ltjf_font_metric_table = ltjf.font_metric_table
  39 local ltjf_find_char_class = ltjf.find_char_class
  40 local node_new = Dnode.new
  41 local node_copy = Dnode.copy
  42 local node_remove = luatexja.Dnode_remove -- Dnode.remove
  43 local node_tail = Dnode.tail
  44 local node_free = Dnode.free
  45 local node_end_of_math = Dnode.end_of_math
  46
  47 local dir_tate = 3
  48 local dir_yoko  = 4
  49
  50 local id_glyph = node.id('glyph')
  51 local id_hlist = node.id('hlist')
  52 local id_vlist = node.id('vlist')
  53 local id_rule = node.id('rule')
  54 local id_ins = node.id('ins')
  55 local id_mark = node.id('mark')
  56 local id_adjust = node.id('adjust')
  57 local id_disc = node.id('disc')
  58 local id_whatsit = node.id('whatsit')
  59 local id_math = node.id('math')
  60 local id_glue = node.id('glue')
  61 local id_kern = node.id('kern')
  62 local id_penalty = node.id('penalty')
  63
  64 local id_glue_spec = node.id('glue_spec')
  65 local id_jglyph    = 512 -- Japanese character
  66 local id_box_like  = 256 -- vbox, shifted hbox
  67 local id_pbox      = 257 -- already processed nodes (by \unhbox)
  68 local id_pbox_w    = 258 -- cluster which consists of a whatsit
  69 local sid_user = node.subtype('user_defined')
  70
  71 local sid_start_link = node.subtype('pdf_start_link')
  72 local sid_start_thread = node.subtype('pdf_start_thread')
  73 local sid_end_link = node.subtype('pdf_end_link')
  74 local sid_end_thread = node.subtype('pdf_end_thread')
  75
  76 local ITALIC       = luatexja.icflag_table.ITALIC
  77 local PACKED       = luatexja.icflag_table.PACKED
  78 local KINSOKU      = luatexja.icflag_table.KINSOKU
  79 local FROM_JFM     = luatexja.icflag_table.FROM_JFM
  80 local PROCESSED    = luatexja.icflag_table.PROCESSED
  81 local IC_PROCESSED = luatexja.icflag_table.IC_PROCESSED
  82 local BOXBDD       = luatexja.icflag_table.BOXBDD
  83 local PROCESSED_BEGIN_FLAG = luatexja.icflag_table.PROCESSED_BEGIN_FLAG
  84 local kanji_skip
  85 local xkanji_skip
  86 local table_current_stack
  87 local list_dir
  88
  89 local attr_curjfnt = luatexbase.attributes['ltj@curjfnt']
  90 local attr_dir = luatexbase.attributes['ltj@dir']
  91 local attr_icflag = luatexbase.attributes['ltj@icflag']
  92
  93 local function get_attr_icflag(p)
  94    return (has_attr(p, attr_icflag) or 0)%PROCESSED_BEGIN_FLAG
  95 end
  96
  97 -------------------- Helper functions
  98
  99 local function copy_attr(new, old)
 100   -- 仕様が決まるまで off にしておく
 101 end
 102
 103 -- This function is called only for acquiring `special' characters.
 104 local function fast_find_char_class(c,m)
 105    return m.chars[c] or 0
 106 end
 107
 108 -- 文字クラスの決定
 109 local function slow_find_char_class(c, m, oc)
 110    local xc = c or oc
 111    local cls = ltjf_find_char_class(oc, m)
 112    if xc ~= oc and  cls==0 then cls = ltjf_find_char_class(-xc, m) end
 113    return cls, xc
 114 end
 115
 116 local zero_glue = node_new(id_glue)
 117 spec_zero_glue = to_node(node_new(id_glue_spec))
 118   -- must be public, since mentioned from other sources
 119 local spec_zero_glue = to_direct(spec_zero_glue)
 120 setfield(spec_zero_glue, 'width', 0)
 121 setfield(spec_zero_glue, 'stretch', 0)
 122 setfield(spec_zero_glue, 'shrink', 0)
 123 setfield(spec_zero_glue, 'stretch_order', 0)
 124 setfield(spec_zero_glue, 'shrink_order', 0)
 125 setfield(zero_glue, 'spec', spec_zero_glue)
 126
 127 local function skip_table_to_spec(n)
 128    local g, st = node_new(id_glue_spec), ltjs.fast_get_stack_skip(n)
 129    setfield(g, 'width', st.width)
 130    setfield(g, 'stretch', st.stretch)
 131    setfield(g, 'shrink', st.shrink)
 132    setfield(g, 'stretch_order', st.stretch_order)
 133    setfield(g, 'shrink_order', st.shrink_order)
 134    return g
 135 end
 136
 137
 138 -- penalty 値の計算
 139 local function add_penalty(p,e)
 140    local pp = getfield(p, 'penalty')
 141    if pp>=10000 then
 142       if e<=-10000 then pp = 0 end
 143    elseif pp<=-10000 then
 144       if e>=10000 then pp = 0 end
 145    else
 146       pp = pp + e
 147       if pp>=10000 then      setfield(p, 'penalty', 10000)
 148       elseif pp<=-10000 then setfield(p, 'penalty', -10000)
 149       else                   setfield(p, 'penalty', pp) end
 150    end
 151    return
 152 end
 153
 154 -- 「異なる JFM」の間の調整方法
 155 diffmet_rule = math.two_paverage
 156 function math.two_add(a,b) return a+b end
 157 function math.two_average(a,b) return (a+b)*0.5 end
 158 function math.two_paverage(a,b) return (a+b)/2 end
 159 function math.two_pleft(a,b) return a end
 160 function math.two_pright(a,b) return b end
 161
 162 local head -- the head of current list
 163
 164 local Np, Nq, Bp
 165 local widow_Bp, widow_Np -- \jcharwidowpenalty 挿入位置管理用
 166
 167 local ihb_flag -- JFM グルー挿入抑止用 flag
 168                -- on: \inhibitglue 指定時，hlist の周囲
 169
 170 -------------------- hlist 内の文字の検索
 171
 172 local first_char, last_char, find_first_char
 173 do
 174 local ltjd_glyph_from_packed = ltjd.glyph_from_packed
 175 local function check_box(box_ptr, box_end)
 176    local p = box_ptr; local found_visible_node = false
 177    if not p then
 178       find_first_char = false; last_char = nil
 179       return true
 180    end
 181    while p and p~=box_end do
 182       local pid = getid(p)
 183       if pid==id_kern and getsubtype(p)==2 then
 184          p = node_next(node_next(node_next(p))); pid = getid(p) -- p must be glyph_node
 185        end
 186       if pid==id_glyph then
 187          repeat
 188             if find_first_char then
 189                first_char = p; find_first_char = false
 190             end
 191             last_char = p; found_visible_node = true; p=node_next(p)
 192             if (not p) or p==box_end then
 193                return found_visible_node
 194             end
 195          until getid(p)~=id_glyph
 196          pid = getid(p) -- p must be non-nil
 197       end
 198       if pid==id_kern then
 199          local pa = get_attr_icflag(p)
 200          --if pa==IC_PROCESSED or pa == PACKED then
 201          if pa==IC_PROCESSED then
 202             -- do nothing
 203          elseif getsubtype(p)==2 then
 204             p = node_next(node_next(p));
 205             -- Note that another node_next will be executed outside this if-statement.
 206          else
 207             found_visible_node = true
 208             find_first_char = false; last_char = nil
 209          end
 210       elseif pid==id_hlist then
 211          if PACKED == get_attr_icflag(p) then
 212             local s = ltjd_glyph_from_packed(p)
 213             if find_first_char then
 214                first_char = s; find_first_char = false
 215             end
 216             last_char = s; found_visible_node = true
 217          else
 218             if getfield(p, 'shift')==0 then
 219                if check_box(getlist(p), nil) then found_visible_node = true end
 220             else
 221                find_first_char = false; last_char = nil
 222             end
 223          end
 224       elseif pid==id_math then
 225          if find_first_char then
 226             first_char = p; find_first_char = false
 227          end
 228          last_char = p; found_visible_node = true
 229          --elseif pid==id_rule and get_attr_icflag(p)==PACKED then -- do nothing
 230       elseif not (pid==id_ins   or pid==id_mark
 231                   or pid==id_adjust or pid==id_whatsit
 232                   or pid==id_penalty) then
 233          found_visible_node = true
 234          find_first_char = false; last_char = nil
 235       end
 236       p = node_next(p)
 237    end
 238    return found_visible_node
 239 end
 240
 241 function check_box_high(Nx, box_ptr, box_end)
 242    first_char = nil;  last_char = nil;  find_first_char = true
 243    if check_box(box_ptr, box_end) then
 244       local first_char = first_char
 245       if first_char then
 246          if getid(first_char)==id_glyph then
 247             if getfont(first_char) == (has_attr(first_char, attr_curjfnt) or -1) then
 248                set_np_xspc_jachar(Nx, first_char)
 249             else
 250                set_np_xspc_alchar(Nx, getchar(first_char),first_char, 1)
 251             end
 252          else -- math_node
 253             set_np_xspc_alchar(Nx, -1,first_char)
 254          end
 255       end
 256    end
 257    return last_char
 258 end
 259 end
 260 -------------------- Np の計算と情報取得
 261
 262 luatexbase.create_callback("luatexja.jfmglue.whatsit_getinfo", "data",
 263                            function (Np, lp, Nq)
 264                               if Np.nuc then return Np
 265                               else
 266                                  return Np  -- your code
 267                               end
 268                            end)
 269 luatexbase.create_callback("luatexja.jfmglue.whatsit_after", "data",
 270                            function (stat, Nq, Np) return false end)
 271
 272 -- calc next Np
 273 do
 274
 275 local function set_attr_icflag_processed(p)
 276    if get_attr_icflag(p)<= ITALIC then
 277       set_attr(p, attr_icflag, PROCESSED)
 278    end
 279 end
 280
 281 local function check_next_ickern(lp)
 282    if lp and getid(lp) == id_kern and ITALIC == get_attr_icflag(lp) then
 283       set_attr(lp, attr_icflag, IC_PROCESSED)
 284       Np.last = lp; return node_next(lp)
 285    else
 286       Np.last = Np.nuc; return lp
 287    end
 288 end
 289
 290 local function calc_np_pbox(lp, last)
 291    Np.first = Np.first or lp; Np.id = id_pbox
 292    local lpa, nc = KINSOKU, nil
 293    set_attr(lp, attr_icflag, get_attr_icflag(lp));
 294    while lp ~=last and (lpa>=PACKED) and (lpa<BOXBDD) do
 295       nc, lp = lp, node_next(lp); lpa = lp and has_attr(lp, attr_icflag) or 0
 296      -- get_attr_icflag() ではいけない！
 297    end
 298    Np.nuc = nc
 299    return check_next_ickern(lp)
 300 end
 301
 302
 303 local calc_np_auxtable = {
 304    [id_glyph] = function (lp)
 305       Np.first, Np.nuc = (Np.first or lp), lp;
 306       Np.id = (getfont(lp) == (has_attr(lp, attr_curjfnt) or -1))
 307          and id_jglyph or id_glyph
 308       return true, check_next_ickern(node_next(lp));
 309    end,
 310    [id_hlist] = function(lp)
 311       local op, flag
 312       head, lp, op, flag = ltjd_make_dir_node(head, lp, list_dir, 'jfm hlist')
 313       set_attr(op, attr_icflag, PROCESSED)
 314       Np.first = Np.first or op; Np.last = op; Np.nuc = op;
 315       Np.id = (flag or getfield(op, 'shift')~=0) and id_box_like or id_hlist
 316       return true, lp
 317    end,
 318    [id_vlist] =  function(lp)
 319       local op
 320       head, lp, op = ltjd_make_dir_node(head, lp, list_dir, 'jfm:' .. getid(lp))
 321       Np.first = Np.first or op; Np.last = op; Np.nuc = op;
 322       Np.id = id_box_like;
 323       return true, lp
 324    end,
 325    box_like = function(lp)
 326       Np.first = Np.first or lp; Np.last = lp; Np.nuc = lp;
 327       Np.id = id_box_like;
 328       return true, node_next(lp)
 329    end,
 330    skip = function(lp)
 331       set_attr(lp, attr_icflag, PROCESSED)
 332       return false, node_next(lp)
 333    end,
 334    [id_whatsit] = function(lp)
 335       local lps = getsubtype(lp)
 336       if lps==sid_user then
 337          if getfield(lp, 'user_id')==luatexja.userid_table.IHB then
 338             local lq = node_next(lp);
 339             head = node_remove(head, lp); node_free(lp); ihb_flag = true
 340             return false, lq;
 341          else
 342             set_attr(lp, attr_icflag, PROCESSED)
 343             luatexbase.call_callback("luatexja.jfmglue.whatsit_getinfo",
 344                                      Np, lp, Nq)
 345             if Np.nuc then
 346                Np.id = id_pbox_w; Np.first = Np.nuc; Np.last = Np.nuc;
 347                return true, node_next(lp)
 348             else
 349                return false, node_next(lp)
 350             end
 351          end
 352       else
 353          -- we do special treatment for these whatsit nodes.
 354          if lps == sid_start_link or lps == sid_start_thread then
 355             Np.first = lp
 356          elseif lps == sid_end_link or lps == sid_end_thread then
 357             Np.first, Nq.last = nil, lp;
 358          end
 359          set_attr(lp, attr_icflag, PROCESSED)
 360          return false, node_next(lp)
 361       end
 362    end,
 363    [id_math] = function(lp)
 364       Np.first, Np.nuc = (Np.first or lp), lp;
 365       set_attr(lp, attr_icflag, PROCESSED)
 366       lp  = node_end_of_math(lp)
 367       set_attr(lp, attr_icflag, PROCESSED)
 368       Np.last, Np.id = lp, id_math;
 369       return true, node_next(lp);
 370    end,
 371    discglue = function(lp)
 372       Np.first, Np.nuc, Np.last = (Np.first or lp), lp, lp;
 373       Np.id = getid(lp); set_attr(lp, attr_icflag, PROCESSED)
 374       return true, node_next(lp)
 375    end,
 376    [id_kern] = function(lp)
 377       Np.first = Np.first or lp
 378       if getsubtype(lp)==2 then
 379          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 380          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 381          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 382          set_attr(lp, attr_icflag, PROCESSED); Np.nuc = lp
 383          Np.id = (getfont(lp) == (has_attr(lp, attr_curjfnt) or -1)) and id_jglyph or id_glyph
 384          return true, check_next_ickern(node_next(lp));
 385       else
 386          Np.id = id_kern; set_attr(lp, attr_icflag, PROCESSED)
 387          Np.last = lp; return true, node_next(lp)
 388       end
 389    end,
 390    [id_penalty] = function(lp)
 391       Bp[#Bp+1] = lp; set_attr(lp, attr_icflag, PROCESSED)
 392       return false, node_next(lp)
 393    end,
 394 }
 395 calc_np_auxtable[id_rule]   = calc_np_auxtable.box_like
 396 calc_np_auxtable[13]        = calc_np_auxtable.box_like
 397 calc_np_auxtable[id_ins]    = calc_np_auxtable.skip
 398 calc_np_auxtable[id_mark]   = calc_np_auxtable.skip
 399 calc_np_auxtable[id_adjust] = calc_np_auxtable.skip
 400 calc_np_auxtable[id_disc]   = calc_np_auxtable.discglue
 401 calc_np_auxtable[id_glue]   = calc_np_auxtable.discglue
 402
 403 function calc_np(lp, last)
 404    local k
 405    -- We assume lp = node_next(Np.last)
 406    Np, Nq, ihb_flag = Nq, Np, nil
 407    -- We clear `predefined' entries of Np before pairs() loop,
 408    -- because using only pairs() loop is slower.
 409    Np.post, Np.pre, Np.xspc = nil, nil, nil
 410    Np.first, Np.id, Np.last, Np.met, Np.class= nil, nil, nil, nil
 411    Np.auto_kspc, Np.auto_xspc, Np.char, Np.nuc = nil, nil, nil, nil
 412    for k in pairs(Np) do Np[k] = nil end
 413
 414    for k = 1,#Bp do Bp[k] = nil end
 415    while lp ~= last  do
 416       local lpa = has_attr(lp, attr_icflag) or 0
 417        -- unbox 由来ノードの検出
 418       if lpa>=PACKED then
 419          if lpa%PROCESSED_BEGIN_FLAG == BOXBDD then
 420             local lq = node_next(lp)
 421             head = node_remove(head, lp); node_free(lp); lp = lq
 422          else return calc_np_pbox(lp, last)
 423          end -- id_pbox
 424       else
 425          k, lp = calc_np_auxtable[getid(lp)](lp)
 426          if k then return lp end
 427       end
 428    end
 429    Np = nil; return lp
 430 end
 431
 432 end
 433 local calc_np = calc_np
 434
 435 -- extract informations from Np
 436 -- We think that "Np is a Japanese character" if Np.met~=nil,
 437 --            "Np is an alphabetic character" if Np.pre~=nil,
 438 --            "Np is not a character" otherwise.
 439 after_hlist = nil -- global
 440 local after_alchar, extract_np
 441 do
 442   local PRE  = luatexja.stack_table_index.PRE
 443   local POST = luatexja.stack_table_index.POST
 444   local KCAT = luatexja.stack_table_index.KCAT
 445   local XSP  = luatexja.stack_table_index.XSP
 446
 447 -- 和文文字のデータを取得
 448    local attr_jchar_class = luatexbase.attributes['ltj@charclass']
 449    local attr_orig_char = luatexbase.attributes['ltj@origchar']
 450    local attr_autospc = luatexbase.attributes['ltj@autospc']
 451    local attr_autoxspc = luatexbase.attributes['ltj@autoxspc']
 452    function set_np_xspc_jachar(Nx, x)
 453       local m = ltjf_font_metric_table[getfont(x)]
 454       local cls, c
 455       if list_dir == dir_tate then
 456          local c1, c2 = getchar(x), has_attr(x, attr_orig_char)
 457          c = has_attr(x, attr_dir) or c1 or c2
 458          cls = ltjf_find_char_class(c, m)
 459          if cls==0 then cls = slow_find_char_class(c2, m, c1) end
 460       else
 461          cls, c = slow_find_char_class(has_attr(x, attr_orig_char), m, getchar(x))
 462       end
 463       Nx.met, Nx.char = m, c; Nx.class = cls;
 464       if cls~=0 then set_attr(x, attr_jchar_class, cls) end
 465       Nx.pre  = table_current_stack[PRE + c]  or 0
 466       Nx.post = table_current_stack[POST + c] or 0
 467       Nx.xspc = table_current_stack[XSP  + c] or 3
 468       Nx.kcat = table_current_stack[KCAT + c] or 0
 469       Nx.auto_kspc, Nx.auto_xspc = (has_attr(x, attr_autospc)==1), (has_attr(x, attr_autoxspc)==1)
 470    end
 471    local set_np_xspc_jachar = set_np_xspc_jachar
 472
 473 -- 欧文文字のデータを取得
 474    local floor = math.floor
 475    function set_np_xspc_alchar(Nx, c,x, lig)
 476       if c~=-1 then
 477          local f = (lig ==1) and nullfunc or node_tail
 478          local xc, xs = getfield(x, 'components'), getsubtype(x)
 479          while xc and xs and xs%4>=2 do
 480             x = f(xc); xc, xs = getfield(x, 'components'), getsubtype(x)
 481          end
 482          c = getchar(x)
 483          Nx.pre  = table_current_stack[PRE + c]  or 0
 484          Nx.post = table_current_stack[POST + c] or 0
 485          Nx.xspc = table_current_stack[XSP  + c] or 3
 486          Nx.char = 'jcharbdd'
 487       else
 488          Nx.pre, Nx.post, Nx.char = 0, 0, -1
 489          Nx.xspc = table_current_stack[XSP - 1] or 3
 490       end
 491       Nx.met = nil
 492       Nx.auto_xspc = (has_attr(x, attr_autoxspc)==1)
 493    end
 494    local set_np_xspc_alchar = set_np_xspc_alchar
 495
 496 -- Np の情報取得メインルーチン
 497    extract_np = function ()
 498       local x, i = Np.nuc, Np.id;
 499       if i ==  id_jglyph then return set_np_xspc_jachar(Np, x)
 500       elseif i == id_glyph then return set_np_xspc_alchar(Np, getchar(x), x, 1)
 501       elseif i == id_hlist then Np.last_char = check_box_high(Np, getlist(x), nil)
 502       elseif i == id_pbox then Np.last_char = check_box_high(Np, Np.first, node_next(Np.last))
 503       elseif i == id_disc then Np.last_char = check_box_high(Np, getfield(x, 'replace'), nil)
 504       elseif i == id_math then return set_np_xspc_alchar(Np, -1, x)
 505       end
 506    end
 507
 508    -- change the information for the next loop
 509    -- (will be done if Nx is an alphabetic character or a hlist)
 510    after_hlist = function (Nx)
 511       local s = Nx.last_char
 512       if s then
 513          if getid(s)==id_glyph then
 514             if getfont(s) == (has_attr(s, attr_curjfnt) or -1) then
 515                set_np_xspc_jachar(Nx, s)
 516             else
 517                set_np_xspc_alchar(Nx, getchar(s), s, 2)
 518             end
 519          else
 520             set_np_xspc_alchar(Nx, -1, s)
 521          end
 522       else
 523          Nx.pre, Nx.met = nil, nil
 524       end
 525    end
 526
 527    after_alchar = function (Nx)
 528       local x = Nx.nuc
 529       return set_np_xspc_alchar(Nx, getchar(x), x, 2)
 530    end
 531
 532 end
 533
 534 -------------------- 最下層の処理
 535
 536 -- change penalties (or create a new penalty, if needed)
 537 local function handle_penalty_normal(post, pre, g)
 538    local a = (pre or 0) + (post or 0)
 539    if #Bp == 0 then
 540       if (a~=0 and not(g and getid(g)==id_kern)) then
 541          local p = node_new(id_penalty)
 542          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 543          setfield(p, 'penalty', a)
 544          head = insert_before(head, Np.first, p)
 545          Bp[1]=p;
 546          set_attr(p, attr_icflag, KINSOKU)
 547       end
 548    else for _, v in pairs(Bp) do add_penalty(v,a) end
 549    end
 550 end
 551
 552 local function handle_penalty_always(post, pre, g)
 553    local a = (pre or 0) + (post or 0)
 554    if #Bp == 0 then
 555       if not (g and getid(g)==id_glue) then
 556          local p = node_new(id_penalty)
 557          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 558          setfield(p, 'penalty', a)
 559          head = insert_before(head, Np.first, p)
 560          Bp[1]=p
 561          set_attr(p, attr_icflag, KINSOKU)
 562       end
 563    else for _, v in pairs(Bp) do add_penalty(v,a) end
 564    end
 565 end
 566
 567 local function handle_penalty_suppress(post, pre, g)
 568    local a = (pre or 0) + (post or 0)
 569    if #Bp == 0 then
 570       if g and getid(g)==id_glue then
 571          local p = node_new(id_penalty)
 572          setfield(p, 'penalty', 10000); head = insert_before(head, Np.first, p)
 573          Bp[1]=p
 574          set_attr(p, attr_icflag, KINSOKU)
 575       end
 576    else for _, v in pairs(Bp) do add_penalty(v,a) end
 577    end
 578 end
 579
 580 -- 和文文字間の JFM glue を node 化
 581 local function new_jfm_glue(m, bc, ac)
 582 -- bc, ac: char classes
 583    local g, d = m.char_type[bc][ac], 0
 584    local n
 585    if g then
 586       n,d = node_copy(g[2]), g[3]
 587       if g[1] then
 588          local f = node_new(id_glue)
 589          set_attr(f, attr_icflag, g[4])
 590          setfield(f, 'spec', n)
 591          return f, d
 592       end
 593    end
 594    return n, d
 595 end
 596
 597 -- Nq.last (kern w) .... (glue/kern g) Np.first
 598 local function real_insert(g)
 599    if g then
 600       head  = insert_before(head, Np.first, g)
 601       Np.first = g
 602    end
 603 end
 604
 605
 606 -------------------- 和文文字間空白量の決定
 607
 608 -- get kanjiskip
 609 local get_kanjiskip
 610 local get_kanjiskip_normal, get_kanjiskip_jfm
 611 do
 612    local KANJI_SKIP   = luatexja.icflag_table.KANJI_SKIP
 613    local KANJI_SKIP_JFM   = luatexja.icflag_table.KANJI_SKIP_JFM
 614    get_kanjiskip_normal = function ()
 615       if Np.auto_kspc or Nq.auto_kspc then
 616          return node_copy(kanji_skip)
 617       else
 618          local g = node_copy(zero_glue)
 619          set_attr(g, attr_icflag, KANJI_SKIP)
 620          return g
 621       end
 622    end
 623
 624    get_kanjiskip_jfm = function ()
 625       local g
 626       if Np.auto_kspc or Nq.auto_kspc then
 627          g = node_new(id_glue); --copy_attr(g, Nq.nuc)
 628          local gx = node_new(id_glue_spec);
 629          setfield(gx, 'stretch_order', 0); setfield(gx, 'shrink_order', 0)
 630          local pm, qm = Np.met, Nq.met
 631          local bk = qm.kanjiskip or {0, 0, 0}
 632          if (pm.char_type==qm.char_type) and (qm.var==pm.var) then
 633             setfield(gx, 'width', bk[1])
 634             setfield(gx, 'stretch', bk[2])
 635             setfield(gx, 'shrink', bk[3])
 636          else
 637             local ak = pm.kanjiskip or {0, 0, 0}
 638             setfield(gx, 'width', round(diffmet_rule(bk[1], ak[1])))
 639             setfield(gx, 'stretch', round(diffmet_rule(bk[2], ak[2])))
 640             setfield(gx, 'shrink', -round(diffmet_rule(-bk[3], -ak[3])))
 641          end
 642          setfield(g, 'spec', gx)
 643       else
 644          g =  node_copy(zero_glue)
 645       end
 646       set_attr(g, attr_icflag, KANJI_SKIP_JFM)
 647       return g
 648    end
 649 end
 650
 651 local calc_ja_ja_aux
 652 do
 653    local bg_ag = 2*id_glue - id_glue
 654    local bg_ak = 2*id_glue - id_kern
 655    local bk_ag = 2*id_kern - id_glue
 656    local bk_ak = 2*id_kern - id_kern
 657
 658    calc_ja_ja_aux = function (gb,ga, db, da)
 659       local rbb, rab = (1-db)/2, (1-da)/2 -- 「前の文字」由来のグルーの割合
 660       local rba, raa = (1+db)/2, (1+da)/2 -- 「前の文字」由来のグルーの割合
 661       if diffmet_rule ~= math.two_pleft and diffmet_rule ~= math.two_pright
 662           and diffmet_rule ~= math.two_paverage then
 663          rbb, rab, rba, raa = 1,0,0,1
 664       end
 665       if not gb then
 666          if ga then
 667             gb = node_new(id_kern); setfield(gb, 'kern', 0)
 668          else return nil end
 669       elseif not ga then
 670          ga = node_new(id_kern); setfield(ga, 'kern', 0)
 671       end
 672
 673       local k = 2*getid(gb) - getid(ga)
 674       if k == bg_ag then
 675          local bs, as = getfield(gb, 'spec'), getfield(ga, 'spec')
 676          -- 両方とも glue．
 677          local bd, ad = getfield(bs, 'width'), getfield(as, 'width')
 678          setfield(bs, 'width', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 679          bd, ad = getfield(bs, 'stretch'), getfield(as, 'stretch')
 680          setfield(bs, 'stretch', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 681          bd, ad = getfield(bs, 'shrink'), getfield(as, 'shrink')
 682          setfield(bs, 'shrink', -round(diffmet_rule(-rbb*bd - rba*ad, -rab*bd - raa*ad)))
 683          node_free(ga)
 684          return gb
 685       elseif k == bk_ak then
 686          -- 両方とも kern．
 687          local bd, ad = getfield(gb, 'kern'), getfield(ga, 'kern')
 688          setfield(gb, 'kern', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 689          node_free(ga)
 690          return gb
 691       elseif k == bk_ag then
 692          local as = getfield(ga, 'spec')
 693          -- gb: kern, ga: glue
 694          local bd, ad = getfield(gb, 'kern'), getfield(as, 'width')
 695          setfield(as, 'width', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 696          ad = getfield(as, 'stretch')
 697          setfield(bs, 'stretch', round(diffmet_rule(rba*ad, raa*ad)))
 698          ad = getfield(as, 'shrink')
 699          setfield(bs, 'shrink', -round(diffmet_rule(-rba*ad, -raa*ad)))
 700          node_free(gb)
 701          return ga
 702       else
 703          local bs = getfield(gb, 'spec')
 704          -- gb: glue, ga: kern
 705          local bd, ad = getfield(bs, 'width'), getfield(ga, 'kern')
 706          setfield(bs, 'width', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 707          bd = getfield(bs, 'stretch')
 708          setfield(bs, 'stretch', round(diffmet_rule(rbb*bd, rab*bd)))
 709          bd = getfield(bs, 'shrink')
 710          setfield(bs, 'shrink', -round(diffmet_rule(-rbb*bd, -rab*bd)))
 711          node_free(ga)
 712          return gb
 713       end
 714    end
 715 end
 716
 717 local function calc_ja_ja_glue()
 718    if  ihb_flag then return nil
 719    else
 720       local qm, pm = Nq.met, Np.met
 721       if (qm.char_type==pm.char_type) and (qm.var==pm.var) then
 722          return new_jfm_glue(qm, Nq.class, Np.class)
 723       else
 724          local npn, nqn = Np.nuc, Nq.nuc
 725          local gb, db = new_jfm_glue(qm, Nq.class,
 726                                      slow_find_char_class(has_attr(npn, attr_orig_char),
 727                                                           qm, getchar(npn)))
 728          local ga, da = new_jfm_glue(pm,
 729                                      slow_find_char_class(has_attr(nqn, attr_orig_char),
 730                                                           pm, getchar(nqn)),
 731                                Np.class)
 732          return calc_ja_ja_aux(gb, ga, db, da);
 733       end
 734    end
 735 end
 736
 737 -------------------- 和欧文間空白量の決定
 738
 739 -- get xkanjiskip
 740 local get_xkanjiskip
 741 local get_xkanjiskip_normal, get_xkanjiskip_jfm
 742 do
 743    local XKANJI_SKIP   = luatexja.icflag_table.XKANJI_SKIP
 744    local XKANJI_SKIP_JFM   = luatexja.icflag_table.XKANJI_SKIP_JFM
 745    get_xkanjiskip_normal = function (Nn)
 746       if (Nq.xspc>=2) and (Np.xspc%2==1) and (Nq.auto_xspc or Np.auto_xspc) then
 747          local f = node_copy(xkanji_skip)
 748          return f
 749       else
 750          local g = node_copy(zero_glue)
 751          set_attr(g, attr_icflag, XKANJI_SKIP)
 752          return g
 753       end
 754    end
 755    get_xkanjiskip_jfm = function (Nn)
 756       local g
 757       if (Nq.xspc>=2) and (Np.xspc%2==1) and (Nq.auto_xspc or Np.auto_xspc) then
 758          g = node_new(id_glue)
 759          local gx = node_new(id_glue_spec);
 760          setfield(gx, 'stretch_order', 0); setfield(gx, 'shrink_order', 0)
 761          local bk = Nn.met.xkanjiskip or {0, 0, 0}
 762          setfield(gx, 'width', bk[1])
 763          setfield(gx, 'stretch', bk[2])
 764          setfield(gx, 'shrink', bk[3])
 765          setfield(g, 'spec', gx)
 766       else
 767          g = node_copy(zero_glue)
 768       end
 769       set_attr(g, attr_icflag, XKANJI_SKIP_JFM)
 770       return g
 771    end
 772 end
 773
 774 -------------------- 隣接した「塊」間の処理
 775
 776 local function get_OA_skip()
 777    if not ihb_flag then
 778       local pm = Np.met
 779       return new_jfm_glue(pm,
 780         fast_find_char_class(((Nq.id == id_math and -1) or (type(Nq.char)=='string' and Nq.char or 'jcharbdd')), pm), Np.class)
 781    else return nil
 782    end
 783 end
 784 local function get_OB_skip()
 785    if not ihb_flag then
 786       local qm = Nq.met
 787       return new_jfm_glue(qm, Nq.class,
 788         fast_find_char_class(((Np.id == id_math and -1) or'jcharbdd'), qm))
 789    else return nil
 790    end
 791 end
 792
 793 -- (anything) .. jachar
 794 local function handle_np_jachar(mode)
 795    local qid = Nq.id
 796    if qid==id_jglyph or ((qid==id_pbox or qid==id_pbox_w) and Nq.met) then
 797       local g = calc_ja_ja_glue() or get_kanjiskip() -- M->K
 798       handle_penalty_normal(Nq.post, Np.pre, g); real_insert(g)
 799    elseif Nq.met then  -- qid==id_hlist
 800       local g = get_OA_skip() or get_kanjiskip() -- O_A->K
 801       handle_penalty_normal(0, Np.pre, g); real_insert(g)
 802    elseif Nq.pre then
 803       local g = get_OA_skip() or get_xkanjiskip(Np) -- O_A->X
 804       handle_penalty_normal((qid==id_hlist and 0 or Nq.post), Np.pre, g); real_insert(g)
 805    else
 806       local g = get_OA_skip() -- O_A
 807       if qid==id_glue then handle_penalty_normal(0, Np.pre, g)
 808       elseif qid==id_kern then handle_penalty_suppress(0, Np.pre, g)
 809       else handle_penalty_always(0, Np.pre, g)
 810       end
 811       real_insert(g)
 812    end
 813    if mode and Np.kcat%2~=1 then
 814       widow_Np.first, widow_Bp, Bp = Np.first, Bp, widow_Bp
 815    end
 816 end
 817
 818
 819 -- jachar .. (anything)
 820 local function handle_nq_jachar()
 821     if Np.pre then
 822       local g = get_OB_skip() or get_xkanjiskip(Nq) -- O_B->X
 823       handle_penalty_normal(Nq.post, (Np.id==id_hlist and 0 or Np.pre), g); real_insert(g)
 824    else
 825       local g = get_OB_skip() -- O_B
 826       if Np.id==id_glue then handle_penalty_normal(Nq.post, 0, g)
 827       elseif Np.id==id_kern then handle_penalty_suppress(Nq.post, 0, g)
 828       else handle_penalty_always(Nq.post, 0, g)
 829       end
 830       real_insert(g)
 831    end
 832 end
 833
 834 -- (anything) .. (和文文字で始まる hlist)
 835 local function handle_np_ja_hlist()
 836    local qid = Nq.id
 837    if qid==id_jglyph or ((qid==id_pbox or Nq.id == id_pbox_w) and Nq.met) then
 838       local g = get_OB_skip() or get_kanjiskip() -- O_B->K
 839       handle_penalty_normal(Nq.post, 0, g); real_insert(g)
 840    elseif Nq.met then  -- Nq.id==id_hlist
 841       local g = get_kanjiskip() -- K
 842       handle_penalty_suppress(0, 0, g); real_insert(g)
 843    elseif Nq.pre then
 844       local g = get_xkanjiskip(Np) -- X
 845       handle_penalty_suppress(0, 0, g); real_insert(g)
 846    end
 847 end
 848
 849 -- (和文文字で終わる hlist) .. (anything)
 850 local function handle_nq_ja_hlist()
 851    if Np.pre then
 852       local g = get_xkanjiskip(Nq) -- X
 853       handle_penalty_suppress(0, 0, g); real_insert(g)
 854    end
 855 end
 856
 857
 858 -- Nq が前側のクラスタとなることによる修正
 859 do
 860    local adjust_nq_aux = {
 861       [id_glyph] = function()
 862                       local x = Nq.nuc
 863                       return set_np_xspc_alchar(Nq, getchar(x),x, 2)
 864                    end, -- after_alchar(Nq)
 865       [id_hlist]  = function() after_hlist(Nq) end,
 866       [id_pbox]  = function() after_hlist(Nq) end,
 867       [id_disc]  = function() after_hlist(Nq) end,
 868       [id_pbox_w]  = function()
 869                         luatexbase.call_callback("luatexja.jfmglue.whatsit_after",
 870                                                  false, Nq, Np)
 871                      end,
 872    }
 873
 874    function adjust_nq()
 875       local x = adjust_nq_aux[Nq.id]
 876       if x then x()  end
 877    end
 878 end
 879
 880
 881 -------------------- 開始・終了時の処理
 882 do
 883
 884 -- リスト末尾の処理
 885 local JWP  = luatexja.stack_table_index.JWP
 886 local function handle_list_tail(mode)
 887    adjust_nq(); Np = Nq
 888    if mode then
 889       -- the current list is to be line-breaked.
 890       -- Insert \jcharwidowpenalty
 891       Bp = widow_Bp; Np = widow_Np
 892       if Np.first then
 893          handle_penalty_normal(0,
 894                                table_current_stack[JWP] or 0)
 895       end
 896    else
 897       -- the current list is the contents of a hbox
 898       local npi, pm = Np.id, Np.met
 899       if npi == id_jglyph or (npi==id_pbox and pm) then
 900          local g = new_jfm_glue(pm, Np.class, fast_find_char_class('boxbdd', pm))
 901          if g then
 902             set_attr(g, attr_icflag, BOXBDD)
 903             head = insert_after(head, Np.last, g)
 904          end
 905       end
 906    end
 907 end
 908
 909 -- リスト先頭の処理
 910 local function handle_list_head(par_indented)
 911    local npi, pm = Np.id, Np.met
 912    if npi ==  id_jglyph or (npi==id_pbox and pm) then
 913       if not ihb_flag then
 914          local g = new_jfm_glue(pm, fast_find_char_class(par_indented, pm), Np.class)
 915          if g then
 916             set_attr(g, attr_icflag, BOXBDD)
 917             if getid(g)==id_glue and #Bp==0 then
 918                local h = node_new(id_penalty)
 919                setfield(h, 'penalty', 10000); set_attr(h, attr_icflag, BOXBDD)
 920             end
 921             head = insert_before(head, Np.first, g)
 922          end
 923       end
 924    end
 925 end
 926
 927 -- initialize
 928 -- return value: (the initial cursor lp), (last node)
 929 local init_var
 930 do
 931    local KANJI_SKIP   = luatexja.icflag_table.KANJI_SKIP
 932    local XKANJI_SKIP   = luatexja.icflag_table.XKANJI_SKIP
 933    local KSK  = luatexja.stack_table_index.KSK
 934    local XSK  = luatexja.stack_table_index.XSK
 935    local DIR  = luatexja.stack_table_index.DIR
 936    init_var = function (mode)
 937       -- 1073741823: max_dimen
 938       Bp, widow_Bp, widow_Np = {}, {}, {first = nil}
 939       table_current_stack = ltjs.table_current_stack
 940
 941       list_dir = ltjs.list_dir or dir_yoko
 942       kanji_skip = node_new(id_glue)
 943       setfield(kanji_skip, 'spec', skip_table_to_spec(KSK))
 944       set_attr(kanji_skip, attr_icflag, KANJI_SKIP)
 945       get_kanjiskip = (getfield(getfield(kanji_skip, 'spec'), 'width') == 1073741823)
 946          and get_kanjiskip_jfm or get_kanjiskip_normal
 947
 948       xkanji_skip = node_new(id_glue)
 949       setfield(xkanji_skip, 'spec', skip_table_to_spec(XSK))
 950       set_attr(xkanji_skip, attr_icflag, XKANJI_SKIP)
 951       get_xkanjiskip = (getfield(getfield(xkanji_skip, 'spec'), 'width') == 1073741823)
 952          and get_xkanjiskip_jfm or get_xkanjiskip_normal
 953
 954       Np = {
 955          auto_kspc=nil, auto_xspc=nil, char=nil, class=nil,
 956          first=nil, id=nil, last=nil, met=nil, nuc=nil,
 957          post=nil, pre=nil, xspc=nil,
 958       }
 959       Nq = {
 960          auto_kspc=nil, auto_xspc=nil, char=nil, class=nil,
 961          first=nil, id=nil, last=nil, met=nil, nuc=nil,
 962          post=nil, pre=nil, xspc=nil,
 963       }
 964       if mode then
 965          -- the current list is to be line-breaked:
 966          -- hbox from \parindent is skipped.
 967          local lp, par_indented, lpi, lps  = head, 'boxbdd', getid(head), getsubtype(head)
 968          while lp and ((lpi==id_whatsit and lps~=sid_user)
 969                        or ((lpi==id_hlist) and (lps==3))) do
 970             if (lpi==id_hlist) and (lps==3) then
 971                Np.char, par_indented = 'parbdd', 'parbdd'
 972                Np.width = getfield(lp, 'width')
 973             end
 974             lp=node_next(lp); lpi, lps = getid(lp), getsubtype(lp) end
 975          return lp, node_tail(head), par_indented
 976       else
 977          return head, nil, 'boxbdd'
 978       end
 979    end
 980 end
 981
 982 local function cleanup(mode)
 983    -- adjust attr_icflag for avoiding error
 984    tex.setattribute('global', attr_icflag, 0)
 985    node_free(kanji_skip); node_free(xkanji_skip)
 986    if mode then
 987       local h = node_next(head)
 988       if getid(h) == id_penalty and getfield(h, 'penalty') == 10000 then
 989          h = node_next(h)
 990          if getid(h) == id_glue and getsubtype(h) == 15 and not node_next(h) then
 991             return false
 992          end
 993       end
 994       return head
 995    else
 996       set_attr(head, attr_icflag,
 997                get_attr_icflag(head) + PROCESSED_BEGIN_FLAG);
 998       return head
 999    end
1000 end
1001 -------------------- 外部から呼ばれる関数
1002
1003 -- main interface
1004 function main(ahead, mode)
1005    if not ahead then return ahead end
1006    head = ahead;
1007    local lp, last, par_indented = init_var(mode)
1008    lp = calc_np(lp, last)
1009    if Np then
1010       extract_np(); handle_list_head(par_indented)
1011    else
1012       return cleanup(mode)
1013    end
1014    lp = calc_np(lp, last)
1015    while Np do
1016       extract_np();
1017       adjust_nq();
1018       local pid, pm = Np.id, Np.met
1019       -- 挿入部
1020       if pid == id_jglyph then
1021          handle_np_jachar(mode)
1022       elseif pm then
1023          if pid==id_hlist then handle_np_ja_hlist()
1024          else handle_np_jachar() end
1025       elseif Nq.met then
1026          if Nq.id==id_hlist then handle_nq_ja_hlist()
1027          else handle_nq_jachar() end
1028       end
1029       lp = calc_np(lp, last)
1030    end
1031    handle_list_tail(mode)
1032    return cleanup(mode)
1033 end
1034 end
1035
1036 do
1037    local IHB  = luatexja.userid_table.IHB
1038    local BPAR = luatexja.userid_table.BPAR
1039    local node_prev = (Dnode ~= node) and Dnode.getprev or node.prev
1040    local node_write = Dnode.write
1041
1042    -- \inhibitglue
1043    function create_inhibitglue_node()
1044       local tn = node_new(id_whatsit, sid_user)
1045       setfield(tn, 'user_id', IHB)
1046       setfield(tn, 'type', 100)
1047       setfield(tn, 'value', 1)
1048       node_write(tn)
1049    end
1050
1051    -- Node for indicating beginning of a paragraph
1052    -- (for ltjsclasses)
1053    function create_beginpar_node()
1054       local tn = node_new(id_whatsit, sid_user)
1055       setfield(tn, 'user_id', BPAR)
1056       setfield(tn, 'type', 100)
1057       setfield(tn, 'value', 1)
1058       node_write(tn)
1059    end
1060
1061    local function whatsit_callback(Np, lp, Nq)
1062       if Np and Np.nuc then return Np
1063       elseif Np and getfield(lp, 'user_id') == BPAR then
1064          Np.first = lp; Np.nuc = lp; Np.last = lp
1065          Np.char = 'parbdd'
1066          Np.met = nil
1067          Np.pre = 0; Np.post = 0
1068          Np.xspc = 0
1069          Np.auto_xspc = false
1070          return Np
1071       end
1072    end
1073
1074     local function whatsit_after_callback(s, Nq, Np)
1075        if not s and getfield(Nq.nuc, 'user_id') == BPAR then
1076          local x, y = node_prev(Nq.nuc), Nq.nuc
1077          Nq.first, Nq.nuc, Nq.last = x, x, x
1078          head = node_remove(head, y)
1079          node_free(y)
1080       end
1081       return s
1082    end
1083
1084    luatexbase.add_to_callback("luatexja.jfmglue.whatsit_getinfo", whatsit_callback,
1085                               "luatexja.beginpar.np_info", 1)
1086    luatexbase.add_to_callback("luatexja.jfmglue.whatsit_after", whatsit_after_callback,
1087                               "luatexja.beginpar.np_info_after", 1)
1088
1089 end