src/ltj-inputbuf.lua

   1 --
   2 -- luatexja/inputbuf.lua
   3 --
   4 luatexbase.provides_module({
   5   name = 'luatexja.inputbuf',
   6   date = '2011/04/01',
   7   version = '0.1',
   8   description = 'Supressing a space by newline after Japanese characters',
   9 })
  10 module('luatexja.inputbuf', package.seeall)
  11 local err, warn, info, log = luatexbase.errwarinf(_NAME)
  12
  13 luatexja.load_module('charrange'); local ltjc = luatexja.charrange
  14
  15 local node_new = node.new
  16 local id_glyph = node.id('glyph')
  17 local getcatcode = tex.getcatcode
  18 local ltjc_is_ucs_in_japanese_char = ltjc.is_ucs_in_japanese_char
  19
  20 --- the following function is modified from jafontspec.lua (by K. Maeda).
  21 --- Instead of "%", we use U+FFFFF for suppressing spaces.
  22 function add_comment(buffer)
  23    local i = utf.len(buffer)
  24    while (i>0) and (getcatcode(utf.byte(buffer, i))==1
  25                  or getcatcode(utf.byte(buffer, i))==2) do
  26       i=i-1
  27    end
  28    if i>0 then
  29       local c = utf.byte(buffer, i)
  30       if c>0x80 then
  31          local ct = getcatcode(c)
  32          local te = tex.endlinechar
  33          local ctl = (te ~= -1) and (getcatcode(te)==5) and (getcatcode(0xFFFFF)==14)
  34          -- Is the catcode of endline character is 5 (end-of-line)?
  35          -- Is the catcode of U+FFFFF (new comment char) is 14 (comment)?
  36          if ((ct==11) or (ct==12)) and ctl then
  37             local p = node_new(id_glyph)
  38             p.char = c
  39             if ltjc_is_ucs_in_japanese_char(p) then
  40                buffer = buffer .. string.char(0xF3,0xBF,0xBF,0xBF) -- U+FFFFF
  41             end
  42             node.free(p)
  43          end
  44       end
  45    end
  46    return buffer
  47 end
  48
  49 luatexbase.add_to_callback('process_input_buffer',
  50    add_comment,'ltj.process_input_buffer')
  51
  52 --EOF